從cookie池搭建說起

這幾天接手了一個很急的項目，要在幾天爬取某網站的數據。該站是我知道國內反爬比較嚴重的網站之一，我也做好了心理準備。 分析 該網站數據需要登錄才能查看，APP抓包了但是沒有發現相關數據，所以選擇從PC站入手。 既然需要登錄，那就需要驗證一個新鮮的cookies可以訪問多少鏈接；驗證方法是： 直接拷貝已經登錄該網站請求的Curl，轉換爲Python代碼，加一個循環，測試，單個賬號可以跑多少頁 經過10

>>阅读原文<<