scrapy工作流程

一：scrapy 工作原理介紹： 千言萬語，不如一張圖來的清晰： 解釋說明： 1、從優先級隊列中獲取request對象，交給engine 2、engine將request對象交給下載器下載，期間會通過downloadmiddleware的process_request方法 3、下載器完成下載，獲得response對象，將該對象交給engine，期間會經過downloadmiddleware的pro

>>阅读原文<<