【Python爬蟲學習】九、Scrapy爬蟲框架

標 沿着1至8順序理解其工作流程題 Scrapy爬蟲框架結構5+2 Enging:（相當於發動機） 整個框架的核心，控制所有模塊的數據流，任何模塊與模塊之間的數據流動都要經過Enging模塊的調度 根據各個模塊提供的事件進行觸發 不需要用戶修改 Downloader 根據用戶提供的請求下載網頁，功能只是獲得一個請求，並向網絡中提交請求，最終獲得返回的相關內容 不需要用戶修改 Scheduler 對

>>阅读原文<<