User-Agent 彙總

前言: 近半年沒有寫博客了,一打開Markdown居然不知道從何開始。半年時間,要分享的東西比較多,今天第一篇,分享一個我經常使用的 User-Agent 集合。 對於爬蟲開發者而言,咱們常常修改瀏覽器的 User-Agent 假裝成移動端,從而像手機瀏覽器同樣訪問目標網站。爬蟲程序帶上不一樣的 User-Agent,能夠從m端(甚至是wap端)爬取目標網站。具體方法見《爬蟲福利:教你爬wap站》
相關文章
相關標籤/搜索