初識爬蟲之爬蟲概述篇

爬蟲概述 我們可以把互聯網比作一張大網，而爬蟲（即網絡爬蟲）便是在網上爬行的蜘蛛。 把網的節點比作一個個網頁，爬蟲爬到這就相當於訪問了該頁面，獲取了其信息 。 可以把節點間的連線比作網頁與網頁之間的鏈接關係，這樣蜘蛛通過一個節點後，可以順着節點連線繼續爬行到達下一個節點，即通過一個網頁繼續獲取後續的網頁，這樣整個網的節點便可以被蜘蛛全部爬行到，網站的數據就可以被抓取下來了 。 獲取網頁 爬蟲首先要

>>阅读原文<<