網絡爬蟲原理解析

1、網絡爬蟲原理 網絡爬蟲指按照一定的規則（模擬人工登錄網頁的方式），自動抓取網絡上的程序。簡單的說，就是講你上網所看到頁面上的內容獲取下來，並進行存儲。網絡爬蟲的爬行策略分爲深度優先和廣度優先。如下圖是深度優先的一種遍歷方式是A到B到D 到E 到C到 F（ABDECF）而寬度優先的遍歷方式ABCDEF 。 2、寫網絡爬蟲的原因 （1）互聯網中的數據量大，我們不能人工的去收集數據，這樣會很浪費時間

>>阅读原文<<