Python爬取站酷全網用戶數據

爬取站酷所有用戶資料作品,圖片,視頻等內容。。。 1.首先我用的是Python3加scrapy,每次爬取一個網站,個人習慣都會對這個網站查看很久,思考怎麼寫最方便,最通用寫這個網站的時候我就發現了,這個網站的每個用戶的網址是比較有規律的,爲自增長,當然可能中間有一些無效用戶嗎,但是不影響我們把數據抓全。 2.其次,這個網站理論上來說相對比較簡單的,因爲沒有IP限制,沒有js**,抓取的時候主要考略
相關文章
相關標籤/搜索