日常作爬蟲調試,遇到小項目,作可行性分析的時候。cookies 的問題每每不是最複雜的,我通常直接調用使用本身的瀏覽器裏面的cookies來作測試 關鍵請求,簡單的請求就不須要取用抓包了。 原理:讀取sqlite3的數據。這裏我是拿的2345加速瀏覽器,版本8.8.0.16453
這裏我直接獲取我已經登入的開源中國帳號作測試。
我用的python2,裏面的sqlite3.dll有問題,因此須要替換DLL/裏面的sqlite3.dll,才能正常使用。
很久以前的代碼了,印象之中好像是支持火狐和谷歌的某些版本,又興趣的能夠自行換文件路徑測試下
百度雲:https://pan.baidu.com/s/1tpMwPfaQXB88lciWl5v_rghtml
import os import sqlite3 import requests import win32crypt def getcookiefromchrome(host='.oschina.net'): #cookiepath=os.environ['LOCALAPPDATA']+r"\Google\Chrome\User Data\Default\Cookies" cookiepath=os.environ['LOCALAPPDATA']+r"\2345Explorer\User Data\Default\CookiesV3" sql="select host_key,name,encrypted_value from cookies where host_key='%s'" % host with sqlite3.connect(cookiepath) as conn: cu=conn.cursor() cookies={name:win32crypt.CryptUnprotectData(encrypted_value)[1].decode() for host_key,name,encrypted_value in cu.execute(sql).fetchall()} return cookies def test2(cookies): url='https://my.oschina.net/u/2367514/admin/profile' httphead={'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.115 Safari/537.36',} r=requests.get(url,headers=httphead,cookies=cookies,allow_redirects=1,verify=False) if 'NLGBZJ' in r.text: print('login cookies isok!') else: print('login cookies is fail') #with open('fail_cookies.html','w+') as f: #f.write(r.text) if __name__=='__main__': cookies=getcookiefromchrome() print cookies test2(cookies)