016：Scrapy使用中必須得會的問題

Scrapy 的優缺點? （1）優點：scrapy 是異步的 採取可讀性更強的 xpath 代替正則強大的統計和 log 系統，同時在不同的 url 上爬行支持 shell 方式，方便獨立調試寫 middleware,方便寫一些統一的過濾器，通過管道的方式存入數據庫 （2）缺點：基於 python 的爬蟲框架，擴展性比較差 基於 twisted 框架，運行中的 exception 是不會幹掉 re

>>阅读原文<<