python scrapy 爬蟲

        今天沒事淺談一下爬蟲，有一次項目中用到數據，就開始用python爬蟲，爬到的數據直接插到數據庫，項目能夠直接從數據庫查找數據，審覈後，能夠在前臺展現，爬取的速度比較慢，後來又用java寫了一個爬蟲代碼，速度也是很慢，最後決定用scrapy這個爬蟲框架爬蟲，不錯，速度確實比以前速度快了一些。java         在用scrapy爬取數據前，須要安裝python下redis，mon

>>阅读原文<<