用selenium爬取淘寶信息

須要的模塊和組件 由於淘寶的Ajax比較複雜,因此這裏使用Selenium來模擬瀏覽器的操做,抓取淘寶商品的信息,並將結果保存到MongoDB中。(我也不清楚爲何複雜,可是能夠學一些新東西也能夠把。) Selenium是一個自動化測試工具,利用它能夠驅動瀏覽器執行特定的動做,如點擊、下拉等操做,同時還能夠獲取瀏覽器當前呈現的頁面的源代碼,作到可見便可爬。 要用到Chrome就須要用到ChromeD
相關文章
相關標籤/搜索