異步爬蟲雜記1

      MVC設計模式可以說是前後端分離,現在的網站一般都是採用前後端分離的。前後端分離的話用爬蟲就要通過抓包來爬取數據了。做爬蟲的第一步是分析。      分析:1.數據是否在網頁的源代碼(html)裏面      2.是否爲ajax異步加載(用後臺API開發)。ajax異步加載對於前端來說開發難度高(因爲異步加載不僅要請求後端,還要JS把進行頁面的渲染),對於後端來說開發難度低(異步加載後
相關文章
相關標籤/搜索