scrapy-爬取流程

什麼時候到pipeline，什麼 時候到spider這個就不說了，這個是框架跳轉到的流程 關鍵是訪問之前要登錄怎麼辦，數據還要注入呢 所以這次我們來關注一下網頁下載前的流程 start_urls 這是個列表，裏面就是爬取的鏈接了 我們前面爬取就只是寫了一個，但是其實可以寫多個 鏈接又是怎麼訪問的呢 parse_start_url 這東西你就可以手動提取鏈接返回了 start_requests 這東

>>阅读原文<<