網絡爬蟲的抓取策略：深度抓取策略、廣度優先遍歷策略、Partial PageRank策略、OCIP策略、大站優先策略

前言 遍歷策略是爬蟲的核心問題，在爬蟲系統中，待抓取URL隊列是很重要的一部分。待抓取URL隊列中的URL以什麼樣的順序排列也是一個很重要的問題，由於這涉及到先抓取那個頁面，後抓取哪一個頁面而決定這些URL排列順序的方法，叫作抓取策略爬蟲策略主要有如下幾種： html 一，深度優先遍歷策略： 深度優先遍歷測試是指網絡爬蟲會從起始頁開始，一個連接一個連接跟蹤下去，處理完這條線路的連接以後，在再轉入下

>>阅读原文<<