一些反爬蟲手段及解決辦法

最近在學習網絡爬蟲，剛開始還行，但是越深入就會遇到很多困難，比如：我爬取拉勾網的時候，這個網站就禁止我的爬蟲，試了好多辦法，但就是不行，最終我老老實實的用Selenium爬取拉勾網。（有大神會的可以指點小弟一二）那這篇文章就來說一說反爬蟲的手段和它的解決辦法。 通過headers字段進行反爬  headers是HTTP請求和相應的核心，它有關於客戶端瀏覽器，請求界面，服務器等相關的信息。 1.通過

>>阅读原文<<