房天下房源爬取：scrapy-redis分佈式爬蟲（一）

從前幾天就開始準備寫一個簡單地分佈式爬蟲的項目了，今天算是把問題和bug逐漸解決了，因此會陸續放上來。html 主機是windows即此電腦，項目也是在windows下寫的，運行會放在linux下的ubuntu系統。python 項目是爬取房天下網站全國600多個城市的全部新房和二手房信息mysql 今天主要記錄一下windows下項目的完成，和數據庫存儲。新房存儲在MySQL數據庫，二手房存儲在

>>阅读原文<<