htmlunit抓取數據的一些總結

最近一直用htmlunit工具來抓數據,完成各種目標網站自動登陸抓取各種數據。過程當中碰到了各種問題,本身慢慢摸索,但最終仍是一一的解決。後面會貼一些代碼上來,不至於讓文章看看起空蕩蕩的。html 附上一些總結:angularjs 1.抓取數據主要兩種方案:1、模擬瀏覽器操做 2、抓包,我的在採起兩種方案時候會交換使用ajax 2.對於有驗證碼的,我的處理辦法:抓取驗證碼到swing面板,手動輸入
相關文章
相關標籤/搜索