Python學習筆記(13) 爬蟲模擬點擊抓取京東商品評論

有些網站是一開始不顯示評論,須要點擊累計評論纔會顯示出評論區的內容,好比蘑菇街;另一些網站是要滾屏好久才顯示出評論內容,好比淘寶京東,這兩類狀況下都要作模擬點擊,直接點開評論區再作採集,這樣作的好處是,能夠精確到目標範圍,省卻不必的加載時間,下面以採集京東商品累計評論爲例,介紹一下怎麼作模擬點擊。web 在作抓取規則時須要作兩級規則實現模擬點擊,第一級規則負責點擊,第二級規則負責抓取點擊後顯示的內
相關文章
相關標籤/搜索