scrapy-框架結構和爬取對象

如圖 一般創建好工程以後目錄是這樣的 和框架圖能夠對應起來的好像就只有middlerwares和pipelines 其實呢，的確有些東西你也是看不到的 而且，我要的是葫蘆，蚜蟲什麼的農夫會管理，也不用我們操心 真想知道，要麼從cpu開始學，要麼先會用了後來慢慢加深 要說的話，框架全靠scrapy引擎，這個就是老大了 老大手下有四員大將： 1. 調度器：任務之間統籌和調度 2. 下載器：負責從網絡上

>>阅读原文<<