jsoup爬取分頁的內容

網站顯示內容基本上都是經過分頁來顯示,咱們用jsoup簡單爬取頁面僅能獲取本頁的內容,對於其餘頁面的內容該如何爬取?其實很簡單,就是經過檢查下一頁的連接地址,基本上下一頁的超連接地址都是有規律的,基本上都是*****/1或者*****/2等等,因此咱們能夠按照這個規律,循環訪問頁面,抓取信息便可;固然,經過選擇器直接將下一頁的url獲取出來也能夠,不過我以爲直接分析仍是比較簡單。java 上代碼:
相關文章
相關標籤/搜索