爬蟲 Accept-Encoding:br 格式的處理

分享記錄一下,剛遇到的一個亂碼網站,爬蟲真是個讓人腦闊疼的一個職業。 問題簡述: 今天接了個臨時的需求,需要抓一下某東的評論數據。調研了一下接口發現很簡單,很nice,沒有任何加密。點擊進去就返回結果,但是通過代碼請求返回的數據亂碼, 讓我着實有點蛋疼,話不多說, 上代碼 請求代碼 返回數據: 發現返回數據都是亂碼,嘗試了各種編碼和解zip數據都不行,發現返回headers 中有一個 ‘Conte
相關文章
相關標籤/搜索