第一節--理解網絡爬蟲

第一節–理解網絡爬蟲 一.爬蟲的定義 網絡爬蟲是一種按照一定的規則自動地抓取網絡信息的程序或者腳本。簡單來說，網絡爬蟲就是根據一定的算法實現編程開發，主要通過URL實現數據的抓取和發掘 傳統的爬蟲有百度，Google等搜索引擎，這類通用的搜索引擎都有自己的核心算法。但是，這類通用的搜索引擎也存在着一定的侷限性： 不同的搜索引擎對於同一個搜索會有不同的結果，搜索出來的結果未必是用戶所需的信息 通用的

>>阅读原文<<