智聯招聘抓取---scrapy框架和requests庫兩種方式實現

#首先分析目標站點，分析得出結果是在json接口裏，然後抓取企業信息需要再次請求頁面進行抓取 #1.直接requests請求進行抓取保存 ##需要注意點： 可能不同企業單頁排版不一樣，需要判斷採取不同形式 保存爲csv文件注意格式，保證數據表格不換行需要添加 newline=’’ import requests import json from lxml import etree import c

>>阅读原文<<