python爬蟲之urllib.error.HTTPError: HTTP Error 418:

python爬蟲之urllib.error.HTTPError: HTTP Error 418: 在家做爬蟲的表格爬取,沒想到就遇到了以前都沒見到過的418錯誤.仔細一想豆瓣網應該是有反爬機制的吧,乾脆僞裝成瀏覽器看看,然後就可以啦.僞裝代碼如下: 很多小夥伴每次做一個爬蟲項目就去找user-agent,其實沒有必要,就用以前的都是可以的。當被檢測到時可以試着改一改最後面的數字,大多數時候都是可以
相關文章
相關標籤/搜索