Python：模擬 Ajax 請求抓取今日頭條街拍美圖

1.分析網頁確定思路 首先我們打開頭條街拍的頁面，我們發現我們看到的詳細頁鏈接直接在源代碼中並不能找到，於是我們就需要去查看我們的 ajax 請求，看看是不是通過 ajax 加載的，我們可以打開瀏覽器控制檯，我們過濾 XHR 請求有了一些發現，如下圖： 在 xhr 請求中 offset 爲 0 的部分，頁面中的 data 爲 0 的 數據部分清楚地地顯示了我們想要查找的詳細頁的數據，然後隨着我們滾

>>阅读原文<<