利用selenium和火狐爬取網易雲評論爬取

網易雲音樂評論是異步加載且每次請求的參數都是加密處理過,身爲一個小白,借鑑網上的解密方法後仍是以爲太複雜了,因而就想嘗試用selenium來暴力爬取。html 本文最後以沙漠駱駝爲實例爬取 固然,相比解密的爬蟲,這個方法更慢,但相對的,不容易被封。 在寫方法開始前,把以前的嘗試簡要說一遍。一開始,我用網頁cookies值,headers調用後獲取了網易雲的評論頁面,是個json格式,而後解析後發現
相關文章
相關標籤/搜索