6、python request使用詳解

時間 2020-06-06

原文原文鏈接

1、總結說明

模擬postman訪問接口，具體參照7、python接口開發（二）>>3、postman訪問接口,本篇文章調用的接口，也是來自於接口開發的源碼，閱讀本篇文章最好先看下python接口是怎樣開發的
模擬get方式訪問：res = requests.get(url,params=data,headers = headers)

第一種方式：res = requests.get(url, params=data, headers = headers)
第二種方式：res = requests.get(url, data=data, headers = headers)
注意:
1.url格式入參只支持第一種方式訪問（params=data），json格式入參，只支持第二種方式（data=data）訪問，
form-data格式入參可使用第一種與第二種方式訪問。
2.無論是那種格式的入參，data入參格式都是{「key」：「vaue」，「key1」：「vaue1"}，注意參數最好用 " 而不是 ' 。
3.若是是url與form-data入參，data參數必須爲字典類型，若是json入參，data必須爲字符類型，字典轉字符方法以下：data =json.dumps(data,ensure_ascii=False)；
4.參數headers必須爲字典類型，字符轉字典方法以下：json.loads(headers)，判斷是不是字典方法如：isinstance(data,dict)

模擬post方式訪問：

第一種方式：res = requests.post(url, params=data, headers = headers)
第二種方式：res = requests.post(url, data=data, headers = headers)
注意:
1.url格式入參只支持第一種方式訪問（params=data），json格式入參，只支持第二種方式（data=data）訪問，
form-data格式入參可使用第一種與第二種方式訪問。
2.無論是那種格式的入參，data入參格式都是{「key」：「vaue」，「key1」：「vaue1"}，注意參數最好用 " 而不是 ' 。
3.若是是url與form-data入參，data參數必須爲字典類型，若是json入參，data必須爲字符類型，字典轉字符方法以下：data =json.dumps(data,ensure_ascii=False)；
4.參數headers必須爲字典類型，字符轉字典方法以下：json.loads(headers)，判斷是不是字典方法如：isinstance(data,dict)

經常使用響應方法

res.text：查看響應內容，返回的是Unicode格式的數據
res.content：查看響應內容，返回的字節流數據(主要用於存儲圖片)
res.url：查看完整訪問url地址
res.encoding：查看響應頭部字符編碼
res.status_code：查看響應碼

session與cookies

cookies操做步驟：
1.訪問：res = requests.get(url) 
2.返回cookie對象：cookiejar = res.cookies 
3.轉爲字典：cookiedict = requests.utils.dict_from_cookiejar(cookiejar)
session操做步驟：
1. 建立session對象：ssion = requests.session()
2. 設置 headers：headers = {"key": "vaule"}
3. 設置登陸入參：{"loginName":"sss", "userPass":"sss"} 
4. 發送附帶用戶名和密碼的請求，並獲取登陸後的Cookie值，保存至sesion：ssion.post(url, data = data,headers=headers)
5. 直接訪問須要登陸的頁面：ssion.get("https://www.sss.cn/preview/c_clg_web?d=233444")

ssl不驗證

#https協議默認verify = True須要證書驗證，verify = False表示不驗證證書
res = requests.get(url,verify = False)

2、源碼舉例

#!/usr/bin/python3
# encoding:utf-8
'''
Created on 2020-04-21 08:20
@author: Administrator
'''
import requests
import json
from _ast import Try
from django.template.context_processors import request

class send():
    #1.get方式，無參數訪問接口
    def send_get(self,url,data,headers = None):
        res = requests.get(url,params=data,headers = headers)
        return res
    #2.post方式，url格式入參訪問接口
    def send_post_url(self,url,data,headers = None):
        res = requests.post(url, params=data, headers = headers)
        return res
    #3.post方式，form-data格式入參訪問接口
    def send_post_fdata(self,url,data,headers = None):
        res = requests.post(url, params=data, headers = headers)
        return res
    #4.post方式，josn格式入參訪問接口
    def send_post_json(self,url,data,headers = {'content-type': 'application/json'}):
        json_data =json.dumps(data,ensure_ascii=False)
        #特別注意，當文件頭是json時 ,發送post請求參數data=值，值必須是json（字符型）
        res = requests.post(url, data=json_data, headers = headers)
        return res
    def cookies(self,url):
        res = requests.get(url)
        #保存CookieJar對象:
        cookiejar = res.cookies
        #將Cookie轉爲字典：
        cookiedict = requests.utils.dict_from_cookiejar(cookiejar)
        return cookiedict
    def session(self):
        # 1. 建立session對象
        ssion = requests.session()
        # 2. 設置headers
        headers = {"User-Agent": "Mozilla/5.0 (Windows NT 6.2; WOW64; Trident/7.0; rv:11.0) like Gecko",
                   "Accept":"image/gif, image/jpeg, image/pjpeg, application/x-ms-application, application/xaml+xml, application/x-ms-xbap, */*",
                   "Accept-Language":"zh-Hans-CN,zh-Hans;q=0.5"}
        # 3. 設置登陸入參
        data = {"loginName":"sss", "userPass":"sss"}  
        # 4. 發送附帶用戶名和密碼的請求，並獲取登陸後的Cookie值，保存至sesion
        ssion.post("https://passport.sss.cn/login/login", data = data,headers=headers)
        # 5. 直接訪問須要登陸的頁面
        res = ssion.get("https://www.sss.cn/preview/c_clg_web?d=233444")
        return res
    def ssl(self):
        #https協議默認verify = True須要證書驗證，verify = False表示不驗證證書
        res = requests.get("https://www.12306.cn/index/",verify = False)
        return res
if __name__ == '__main__':
    #1.get方式，無參數訪問接口
    res1 = send().send_get('http://127.0.0.1:8888/index',{})
    print('1.get方式，無參數訪問接口,返回值：')
    #響應內容json格式轉字典
    print(res1.json())
    print('-------開始打印request常見響應方法內容---------------')
    print('查看響應內容，res.text 返回的是Unicode格式的數據')
    print(res1.text)
    print('查看響應內容，res.content返回的字節流數據(主要用於存儲圖片)')
    print(res1.content)
    print('查看完整url地址，res.url')
    print(res1.url)
    print('查看響應頭部字符編碼，res.encoding')
    print(res1.encoding)
    print('查看響應碼，res.status_code')
    print(res1.status_code)
    print('-------結束打印request常見響應方法內容---------------')
    #2.post方式，url格式入參訪問接口
    res2 = send().send_post_url('http://127.0.0.1:8888/article',{'id':'12589','token':'ASDE23EEE9'})
    print('2.post方式，url格式入參訪問接口,返回值：')
    print(res2.json())
    #3.post方式，form-data格式入參訪問接口
    res3 = send().send_post_fdata('http://127.0.0.1:8888/login',{'usrname':'test','pwd':'123456'})
    print('3.post方式，form-data格式入參訪問接口,返回值：')
    print(res3.json())
    #4.post方式，josn格式入參訪問接口
    res4 = send().send_post_json('http://127.0.0.1:8888/loginjosn',{"usrname": "test","pwd": "123456"})
    print('4.post方式，josn格式入參訪問接口,返回值：')
    print(res4.json())
    res5 = send().cookies('http://www.baidu.com')
    print('5.訪問百度打印colies,返回值：')
    print(res5)
    res6 = send().session()
    print('6.須要登陸才能夠看到資源，經過session可直接查看,返響應狀態碼：')
    print(res6.status_code)
    res7 = send().ssl()
    print('7.訪問12306,設置不驗證ssl,verify = False，返響應狀態碼：')
    print(res7.status_code)

運行結果html

1.get方式，無參數訪問接口,返回值：
{'msg': '成功訪問首頁', 'msg_code': 200}
-------開始打印request常見響應方法內容---------------
查看響應內容，res.text 返回的是Unicode格式的數據
{"msg": "成功訪問首頁", "msg_code": 200}
查看響應內容，res.content返回的字節流數據(主要用於存儲圖片)
b'{"msg": "\xe6\x88\x90\xe5\x8a\x9f\xe8\xae\xbf\xe9\x97\xae\xe9\xa6\x96\xe9\xa1\xb5", "msg_code": 200}'
查看完整url地址，res.url
http://127.0.0.1:8888/index
查看響應頭部字符編碼，res.encoding
utf-8
查看響應碼，res.status_code
200
-------結束打印request常見響應方法內容---------------
2.post方式，url格式入參訪問接口,返回值：
{'msg': '成功訪問文章', 'msg_code': 200}
3.post方式，form-data格式入參訪問接口,返回值：
{'msg': '登陸成功', 'msg_code': 200}
4.post方式，josn格式入參訪問接口,返回值：
{'msg': '登陸成功', 'msg_code': 200}
5.訪問百度打印colies,返回值：
{'BDORZ': '27315'}
6.須要登陸才能夠看到資源，經過session可直接查看,返回值：
200
D:\pythonaz\lib\site-packages\urllib3\connectionpool.py:997: InsecureRequestWarning: Unverified HTTPS request is being made to host 'www.12306.cn'. Adding certificate verification is strongly advised. See: https://urllib3.readthedocs.io/en/latest/advanced-usage.html#ssl-warnings
  warnings.warn(
7.訪問12306,設置不驗證ssl,verify = False，返響應狀態碼：
200

3、問題

1. json轉字典，json格式入參問題

問題描述，發送get請求，響應內容轉字典，如requests.get(url).json(),報錯：json.decoder.JSONDecodeError: Expecting value: line 1 column 1 (char 0)
緣由：
1.響應內容不是json{key:vaule}格式；
2.json格式入參，如res = requests.post(url, data=data, headers = headers)，入參data值爲字典類型
3.字符轉字典,字符個數不是key-value個數，或者key-vaule用的是單引號，如json.loads('key':'value')
解決方案：
1.響應內容必須是json格式才能夠調用josn轉字典json()方法
2.json格式入參，如res = requests.post(url, data=data, headers = headers)，入參data值必須轉換爲字符類型
3.字符轉字典，必須保證是key-vaule，而且參數引號必須用雙引號，如json.loads("key":"value")

2. 接口沒法訪問

問題描述：發送get請求，requests.get(url)，報錯以下：
requests.exceptions.ConnectionError: HTTPConnectionPool(host='127.0.0.1', port=8888): Max retries exceeded with url: /index (Caused by NewConnectionError('<urllib3.connection.HTTPConnection object at 0x0000025527634A00>: Failed to establish a new connection: [WinError 10061] 因爲目標計算機積極拒絕，沒法鏈接。'))
緣由：1.8888端口沒法訪問；2.接口服務未開啓
解決方案：1.設置8888端口可訪問；2.開啓接口服務

3. 發送個get/post失敗

問題描述：發送get：request.get("http://www.baidu.com")，報錯以下：
AttributeError: 'function' object has no attribute 'get'
緣由：1.代碼錯誤；2.變量名與系統（包括擴展庫或者保留字）的重複
解決方法：本例是代碼錯誤，request改成requests