盤點HTTP請求頭、響應頭的一些參數說明

我們知道，從用戶請求的headers進行反爬蟲，是最常見的反爬蟲策略。很多網站都會對headers的User-Agent進行檢測，還有的網站針對Referer進行檢測（一些資源網站的防盜鏈就是檢測Referer），還有一些網站需要對cookies進行檢測等等。所以，headers的設置雖然很基礎，但對於爬蟲策略來說也很重要，我們一起來看看關於headers的一些參數說明吧。

>>阅读原文<<