使用客戶端httpClient攜帶cookie,模擬登陸網站,扒取html網頁信息

首先用chrom瀏覽器F12查看登陸頁面的登陸方式,是post還是get,響應碼200爲成功登陸,302爲重定向到首頁。 組裝form表單參數,創建帶有cooie的客戶端Client。 拿到登陸cookie,使用get方式獲取定向網頁的數據。 可以配合定時任務,一直扒取網頁信息,對網頁信息做統計。
相關文章
相關標籤/搜索