關於爬取異步加載的頁面

        在爬取網站時常遇到異步加載的情況，必須點擊或者下拉滾動條纔會加載出更多的圖片或視頻，在源碼中卻一片空白，我一開始遇到時候也有點懵，瞭解了就好，還是請求。學過一些前端知識的朋友都清楚其實就是ajax異步加載js，這是爲了提高用戶的體驗，許多網站都使用這種方法。         究其根本，其實就是將這部分請求放在了後臺，查看的話，按F12然後F5刷新頁面，在Network標籤下都會顯示

>>阅读原文<<