【爬蟲學習筆記day03】1.1. (瞭解)通用爬蟲和聚焦爬蟲+通用搜索引擎(Search Engine)工作原理+聚焦爬蟲

文章目錄 1.1. (瞭解)通用爬蟲和聚焦爬蟲 通用爬蟲和聚焦爬蟲 通用爬蟲 通用搜索引擎(Search Engine)工作原理 第一步:抓取網頁 搜索引擎如何獲取一個新網站的URL: 1. 新網站向搜索引擎主動提交網址:(如百度http://zhanzhang.baidu.com/linksubmit/url) 2. 在其他網站上設置新網站外鏈(儘可能處於搜索引擎爬蟲爬取範圍) 3. 搜索引擎和
相關文章
相關標籤/搜索