IP不足得問題爬蟲是怎麼解決得

當你利用爬蟲爬取網絡信息的時候經常會找不到原因的被目標網站禁止訪問，你可以從下面幾個方面入手查找原因。 第一如果你發現你抓取到的信息和目標網站所顯示的正常信息不一樣，或者說所抓取的信息是空白的，那麼很有可能就是你抓取的網站在創建頁面的時候程序出現了問題。如果抓取的頻率高過了目標網站的限制閥值，就會被禁止訪問。 在通常情況下，IP就是網站的反扒中機制的依據，當我們對網站進行訪問的時候，我們的IP地址

>>阅读原文<<