用php藍天採集抓取今日頭條ajax的文章內容

今日頭條的數據都是ajax加載顯示的，按照正常的url是抓取不到數據的，需要分析出加載出址，我們以 https://www.toutiao.com/search/?keyword=%E6%96%B0%E9%97%BB  爲例來採集列表的文章 用谷歌瀏覽器打開鏈接，右鍵點擊「審查」在控制檯切換至network並點擊XHR，這樣就可以過濾圖片、文件等等不必要的請求只看頁面內容的請求 由於頁面是ajax

>>阅读原文<<