requests+cookie爬取淘寶任意商品評論。超詳細教程!

首先使用的工具:python3.7,火狐瀏覽器 思路分析:如今網頁版淘寶搜索商品以後,點進去,基本上都會彈出登陸框,當咱們直接把一個商品的連接去爬取的時候,返回的會是登錄頁面的Html,因此咱們第一步就是先在網頁版登錄淘寶。 而後思考,爲何會返回登錄頁面呢,由於淘寶的反爬會識別你的參數,也就是瀏覽器請求頭的信息,裏面包含了什麼瀏覽器假裝,cookie了,以下圖。(記住打開的是淘寶的商品,不是天貓的
相關文章
相關標籤/搜索