爬蟲實戰-微博主頁內容,評論

微博可用selenium獲取頁面,分析頁面數據,提取數據,就是有點慢;能夠對手機端api數據提取:scrapy連接html 能夠經過粉絲列表,關注列表取出微博id後依次循環抓取全站,反爬需cookies訪問,構建cookies池反反爬,代理ip等反爬手段,python 單頁分析:json import re,json import requests import pandas # 沒接觸pand
相關文章
相關標籤/搜索