Python爬蟲從入門到放棄（十二）之 Scrapy框架的架構和原理

本文出自「python修行路」博客，http://www.cnblogs.com/zhaof/p/7173397.html 這一篇文章主要是爲了對scrapy框架的工作流程以及各個組件功能的介紹 Scrapy目前已經可以很好的在python3上運行 Scrapy使用了Twisted作爲框架，Twisted有些特殊的地方是它是事件驅動的，並且比較適合異步的代碼。對於會阻塞線程的操作包含訪問文件、數據

>>阅读原文<<