51job招聘爬蟲&數據分析

招聘爬蟲+數據分析 1.爬蟲： 採用Scrapy 分佈式爬蟲技術，使用mongodb作爲數據存儲，爬取的網站Demo爲51job，數據我目前爬了有幾千條 2.數據處理： 採用pandas對爬取的數據進行清晰和處理 2.數據分析： 採用flask後端獲取mongodb數據，前端使用bootstrap3.echarts以及D3的詞雲圖 ###注意：1. pymongo安裝版本 <=3.0 建議 pip

>>阅读原文<<