360 搜索的百億級網頁搜索引擎架構實現

目前 360 搜索每日抓取的網頁數量高達十億，已經收錄的網頁基本上是萬億級別的網頁集合，實際可檢索的網頁是在一個百億級別的網頁集合裏。前端 目前 360 搜索的單日流量是億級 pv。咱們目前的在線、離線機羣有幾萬臺服務器來維護這麼大量級的計算。web 主要內容 我今天的分享的主要會側重於百億級網站搜索引擎架構的一些核心模塊的理論設計。本次分享內容分爲如下四個模塊：算法 如何設計搜索引擎 百億級網頁

>>阅读原文<<