Python爬取無限滾動頁面

在本教程中，我將討論如何使用Python抓取無限滾動頁面。 您將瞭解如何在Web開發工具中分析HTTP請求，並使用過濾器來幫助您快速找到獲取真實數據的目標請求。 本教程還包含兩個基於Scrapy和的工作代碼文件Beautifulsoup。您可以比較它們以更好地理解Python世界中頂級的兩個Web抓取框架。 讓我們開始吧。 背景上下文 如今，越來越多的網站開始用它infinite scrollin

>>阅读原文<<