從零開始學爬蟲(5)——爬蟲的流程

一、爬蟲的分類 **通用爬蟲:**通常是指搜索引擎的爬蟲 **聚焦爬蟲:**針對特定網站的爬蟲 二、通用搜索引擎和聚焦爬蟲工作的原理 其中從相應內容中再次提取URL指的是有些網站例如新浪網站中,新聞分了很多頁,我們要從返回的頁面中提取「下一頁」等等的URL
相關文章
相關標籤/搜索