爬蟲之Scrapy框架知識總結

本應該一個月前完成的總結，硬是拖到了如今，不能不說個人辦事效率有多低下了。。。php 前段時間學習了python爬蟲的相關知識，爬蟲的意思就是用機器代替人去訪問連接，而後將頁面中的東西爬下來，保存在本地，意思基本就是這樣。 如今的爬蟲基本上分爲這兩大類： 累積式抓取（cumulative crawling）和增量式抓取（incremental crawling） 累積式抓取是指從某一個時間點開始，

>>阅读原文<<