【Python 爬蟲之旅 2】抓包工具fiddler的使用

爲什麼要使用fiddler 最近爬了好多網站，每個網站的訪問方式、翻頁方式都各有特色，每次我都要在第一步卡很長時間，這個時候正確使用抓包工具就是很有必要的了。 因爲我們爬蟲其實就是模擬瀏覽器去訪問網站，而抓包工具是監測我們訪問網站的，我們可以用瀏覽器訪問一次即將要爬取的網站，然後在fiddler中查看http請求行的數據，如headers內容、data內容等，然後模仿瀏覽器訪問的這些數據。 只要我

>>阅读原文<<