Python selenium爬蟲抓取船舶網站數據(動態頁面)

很早以前就開始學習爬蟲了,一直想學習爬取動態頁面,正巧工做中須要用到一個船舶信息的網站,每次都是手動查詢太麻煩了,昨天下午研究了一下午,總算搞透徹了,基本步驟以下: 一、啓動瀏覽器 二、打開網頁 三、模擬輸入,模擬點擊 四、稍等一會(很重要) 五、獲取網頁數據 六、清洗數據html 代碼分兩部分,一部分保存爲函數(Chrome_shipxy.py),另外一部分做爲程序調用函數,這樣方便擴展多進程使
相關文章
相關標籤/搜索