使用selenium爬取淘寶商品

爬取的頁面是:「https://s.taobao.com/search?q=手機」,這個是淘寶搜索手機時候的網址。 爬取的思路:使用selenium來模擬登錄淘寶,而後爬取這一頁中商品的一些信息;爬取完之後,找到輸入頁面的輸入框,依次輸入下一頁的頁碼,好比剛剛爬的是第一頁,就輸入2,再點擊肯定按鈕,以此類推,就能夠實現翻頁的功能。其中須要屢次使用WebDriverWait,來保證須要爬取的內容出現
相關文章
相關標籤/搜索