通用爬蟲和聚焦爬蟲

通用爬蟲和聚焦爬蟲 根據使用場景，網絡爬蟲可分爲 通用爬蟲 和 聚焦爬蟲 兩種.數據庫 通用爬蟲 通用網絡爬蟲 是 捜索引擎抓取系統（Baidu、Google、Yahoo等）的重要組成部分。主要目的是將互聯網上的網頁下載到本地，造成一個互聯網內容的鏡像備份。瀏覽器 通用搜索引擎（Search Engine）工做原理 通用網絡爬蟲 從互聯網中搜集網頁，採集信息，這些網頁信息用於爲搜索引擎創建索引從而

>>阅读原文<<