關於selenium和requests結合使用的一個項目案例

文章目錄 緒論 爬蟲思路 實踐代碼 結語 緒論 好久沒有作爬蟲了，最近在公司作數據的時候整合某個數據時發現給的數據是從網站上進行下載的，可是領導的要求是定時從網站上下載作更新，這就須要我從新把爬蟲的知識撿起來了。簡單的記錄一下處理的思路：html 要爬取的網站是須要登陸的，並且內部html代碼有不少的JavaScript腳本，登陸受權跨越了好幾個網站，想要靠requests直接找到登陸連接，基本上

>>阅读原文<<