JSoup+Htmlunit爬取分頁組件中的分頁數據

JSoup+htmlunit爬取分頁組件中的數據 業務需求場景 爬取XX網站中的球隊數據-球隊的比賽賽程（所有賽程放在一個分頁主件中的） 這裏不像傳統的分頁頁面，需要傳入一個page頁碼再去請求，然後再去爬取table 中的數據 解決思路 利用 htmlunit 去模擬點擊事件（這裏指點擊下一頁），循環點擊去取到每一頁的結果（效率低，建議後面存緩存或者入庫） 分析頁面： 我們可以發現數據是放在一個

>>阅读原文<<