數學之美:圖論與網絡爬蟲

若是將互聯網比成一個大的圖的話,那網絡爬蟲就是從某個網頁出發,用圖的遍歷算法,自動的訪問每個網頁,並保存它們。顯然現在的互聯網很是龐大,僅僅幾臺服務器是沒法完成這些任務的。所以一個商業網絡爬蟲須要成千上萬的服務器,並經過高速網絡鏈接起來。如何創建這樣複雜的網絡系統,協調服務器之間的任務就是網絡設計和程序設計的藝術了。算法 如何構建一個網絡爬蟲?瀏覽器 使用BFS仍是DFS?服務器 搜索引擎的網絡爬
相關文章
相關標籤/搜索