scrapy是什么？

It這是一個爬行框架

Scrapy是一個適用于Python的快速、高級的屏幕抓取和網頁抓取框架，用于抓取網站和從頁面中提取結構化數據。Scrapy廣泛應用于數據挖掘、監控和自動化測試。

Scrapy的吸引力在于，它是一個任何人都可以根據自己的需要輕松修改的框架。它還提供了各種爬蟲的基類，如Bas

用scrapy框架做爬蟲，直接請求一個post接口的數據怎么寫？

(urlurl，formdatadata，)

Python3爬蟲入門，有什么好的建議嗎？

It爬行動物很容易上手。說白了，爬蟲就是一個獲取網頁、解析網頁、獲取數據的過程。只要你有一定的python基礎，能看懂簡單的網頁，能使用瀏覽器自帶的抓包工具，很快就能上手。我來總結一下關于python爬蟲的以下幾點:

1.了解基本的web知識和基本的前端知識，如html、css、javascript等。目前我們抓取的數據都在網頁上，大部分數據都嵌入在網頁的源代碼中。最起碼要能看懂這些html代碼，比如基本的div，span，class等。這些是分析數據的先決條件。我們是前端，沒必要精通，但起碼要懂，要懂。如果你從未接觸過網頁的知識，我建議你花幾天時間去了解它們:

2.將簡單地使用瀏覽器自帶的開發工具。一般來說，我們爬取的數據是靜態的，直接嵌入在網頁的源代碼中，但有些數據不是。它是動態加載的，不在網頁的源代碼中，只有在頁面被請求時才加載數據。這時候我們需要抓取包分析，得到實際存儲數據的文件，解析這個文件得到我們需要的數據。在大多數情況下，它是一個json文件。這時候就需要解析json文件了。

3.最后是真正的入門python爬蟲。剛開始可以爬一些簡單的網頁，數據量不大。使用requests，BeautifulSoup，urllib等。先練習，掌握基本的爬行動物。熟悉了之后就可以學習爬蟲框架了，比如scrapy。畢竟用框架開發效率更高，速度更快，大部分項目都是用框架開發的:

掌握了這些，就可以抓取大部分web數據了，接下來還需要學習分布式、多線程、數據存儲。我贏了。;不要在這里寫太多。丹尼爾在網上寫了很多，在這方面很有經驗?？梢运阉鲗W習。那個這就是我想說的。主要是多練習，多做項目，多積累。厭倦了體驗，才能有一個快速的進步，希望上面分享的內容能幫到你。