微博社交內容信息爬取(selenium和equests請求接口兩種方法)

整體目標:抓取微博內容信息;給一個入口,抓分佈抓取關注list,而後給到具體連接去爬取具體我的的微博信息 #我這如今有兩種方式,selenium模擬登錄和下拉,二是分析接口獲取具體微博信息,這邊暫時沒有徹底放開安裝list關注再分別一次抓取每一個關注的微博,後面會更新html 一,requests抓取 1.分析 具體微博我的頁面,首先你須要切換到所有微博,而後下拉分析,後面內容是經過ajax加載,
相關文章
相關標籤/搜索