Scrapy 西瓜皮框架

Scrapy框架使用感受 使用一個框架最理想的狀況是: 懂得其原理 看得懂日誌 精通其配置 這樣的框架就是很好用，用最好的代碼做更多的事情，爬蟲也就是一個工具而已，所以很多事情都可以通過框架來做，原本我通過java以及c++都寫過爬蟲，使用了scrapy後，發現那些都太弱了，順帶我總結了一下中小型爬蟲系統都需要考慮的方面。 scrapy雖然已經很強大，但是在中斷處理方面並沒有給出好的方案，還需要開

>>阅读原文<<