scrapy框架爬取Boss直聘，數據存入mysql

自從上次用了scrapy爬取豆瓣電影后，發現scrapy除了入門相對request較難外，各方面都挺好的，速度很快，還有各個功能模塊，以及django類似的各種中間件組成一個完善的系統框架，需要一點一點的學習，瞭解，畢竟官方文檔寫的太隨性了~~~ 這次我爬取的是boss直聘上的各種職業，以及該職位的薪水，地點，公司等情況.... 老規矩鎮樓圖如下：  一張表大概有300個數據，因爲boss直聘搜索

>>阅读原文<<