爬蟲學習筆記:Selenium爬取淘寶美食 附完整代碼

  淘寶的頁面也是通過Ajax來抓取相關數據,但是參數比較複雜,甚至包含加密祕鑰。使用selenium來模擬瀏覽器操作,抓取淘寶商品信息,即可做到可見即可爬。 1.準備工作     用selenium抓取淘寶商品,並用pyquery解析得到商品的圖片,名稱,價格,購買人數,店鋪名稱和店鋪所在位置。     即需要安裝selenium,pyquery,以及Chrome瀏覽器並配置ChromeDriv
相關文章
相關標籤/搜索