urllib -- ProxyHandler處理器(代理設置)

import  urllib.request
import random
import ssl

proxy_list = [
{"https" : "196.61.27.58:53281"},
{"http" : "121.232.144.81:9000"}
]

# 隨機選擇一個代理
proxy = random.choice(proxy_list)

# 構建兩個代理Handler,一個有 代理ip,一個沒有代理ip
httpproxy_handler = urllib.request.ProxyHandler(proxy)
nullproxy_handler = urllib.request.ProxyHandler()

# 使用私密代理
# httpproxy_handler = urllib2.ProxyHandler({'http':"用戶名:密碼@2175.9.179.50:80"})

# 定義一個代理開關
proxySwitch = True

# 經過urllib.request.build_opener()方法使用代理對象Handler,並建立opener對象
# 根據代理開關是否打開,使用不一樣的代理模式
if proxySwitch:
opener = urllib.request.build_opener(httpproxy_handler)
else:
opener = urllib.request.build_opener(nullproxy_handler)

request = urllib.request.Request("http://www.baidu.com/")

# 1. 若是這麼寫,只有使用opener.open()方法發送請求才使用自定義的代理,而urlopen()則不使用自定義代理。
# response = opener.open(request)

# 2. 構建全局的opener,以後的全部請求均可以用urlopen()方法去發送,都將使用自定義代理。
urllib.request.install_opener(opener)
response = urllib.request.urlopen(request,context=ssl._create_unverified_context())

print(response.read().decode('utf-8'))"""urllib.error.URLError: <urlopen error [WinError 10060] 因爲鏈接方在一段時間後沒有正確答覆或鏈接的主機沒有反應,鏈接嘗試失敗。>HTTPS 請求驗證SSL證書,就像web瀏覽器同樣,若是網站的SSL證書是通過CA認證的,則可以正常訪問導入Python SSL處理模塊import ssl2. 表示忽略未經覈實的SSL證書認證context = ssl._create_unverified_context()urlopen()方法裏 指明添加 context 參數response = urllib.request.urlopen(request, context = context)"""
相關文章
相關標籤/搜索