Scrapy框架快速入門（一）

scrapy的簡介 Scrapy 使用了Twisted[‘twɪstɪd]異步網絡框架，可以加快我們的下載速度。 Scrapy是一個爲了爬取網站數據，提取結構性數據而編寫的應用框架，我們只需要實現少量的代碼，就能夠快速的抓取。 scrapy的工作流程 模塊介紹： 調度器：Scheduler，實現一個隊列，存放request對象，併發送給引擎 引擎：Scrapy Engine，各功能模塊之間交流通道

>>阅读原文<<