技術 | Python從零開始系列連載（二十九）

寫爬蟲防止被封的關鍵有以下幾點：  ●  僞裝請求報頭（request header）  ●  減輕訪問頻率，速度  ●  使用代理IP 一般第一點都能做到，第二點減輕訪問頻率就會大大增加任務時間，而使用代理就能在不增加任務時長避免被封的關鍵（實際情況卻是任務時間因爲代理的使用而增加的，但這裏不細說，知道就好）。 下面我們從 國內高匿代理IP 獲得代理IP數據。 import os import

>>阅读原文<<