經常使用瀏覽器User-Agent

1，爲何須要修改UserAgenthtml 在寫python網絡爬蟲程序的時候，常常須要修改UserAgent，有不少緣由，羅列幾個以下：python 不一樣Agent下看到的內容不同，好比，京東網站上的手機版網頁和pc版網頁上的商品優惠不同 爲避免被屏蔽，爬取不一樣的網站常常要定義和修改useragent值。 …… 修改agent值這個操做自己比較簡單，UserAgent值是一串字符串，替換上便

>>阅读原文<<