python爬取前程無憂分析一波機械職位信息

秋招這個時候已經開始了，正所謂知己知彼方能百戰不殆，今天就從招聘網站下手分析一波機械的就業前景。 此次獲取數據的網站是前程無憂，之因此選擇前程無憂，是由於數據獲取沒有什麼難度，再者前程無憂提供的崗位信息比智聯招聘，拉勾提供的數據都多。 看了一下，前程無憂提供了 2000頁/50條 數據，考慮到數據可能有些重複，這裏獲取 48569 條數據。html 數據獲取 用到的爬蟲框架是 scrapy 解析庫

>>阅读原文<<