PySpider爬蟲框架介紹與phantomjs的安裝

pyspider的介紹 PySpider是一種爬蟲框架，基於PyQuery實現的。 一個國人編寫的強大的網絡爬蟲系統並帶有強大的WebUI。採用Python語言編寫，分佈式架構，支持多種數據庫後端，強大的WebUI支持腳本編輯器， 優勢：         1.    基於多線程異步的調度方式；可實現爬蟲的高併發爬取，注意使用代理。         2.    它提供了一個WebUI的爬蟲任務管理界

>>阅读原文<<