Python3 爬蟲（二） -- 僞裝瀏覽器

一、僞裝瀏覽器 對於一些需要登錄的網站，如果不是從瀏覽器發出的請求，則得不到響應。所以，我們需要將爬蟲程序發出的請求僞裝成瀏覽器正規軍。 具體實現：自定義網頁請求報頭。 二、使用Fiddler查看請求和響應報頭 打開工具Fiddler，然後再瀏覽器訪問「https://www.douban.com/」，在Fiddler左側訪問記錄中，找到「200 HTTPS www.douban.com」這一條，

>>阅读原文<<