用selenium爬取淘寶信息

需要的模塊和組件 因爲淘寶的Ajax比較複雜,所以這裏使用Selenium來模擬瀏覽器的操作,抓取淘寶商品的信息,並將結果保存到MongoDB中。(我也不清楚爲什麼複雜,但是可以學一些新東西也可以把。) Selenium是一個自動化測試工具,利用它可以驅動瀏覽器執行特定的動作,如點擊、下拉等操作,同時還可以獲取瀏覽器當前呈現的頁面的源代碼,做到可見即可爬。 要用到Chrome就需要用到Chrome
相關文章
相關標籤/搜索