Hadoop的產生背景

Hadoop的產生 HADOOP最早起源於Nutch。  Nutch的設計目標是構建一個大型的全網搜索引擎,包括網頁抓取、索引、查詢等功能,  但隨着抓取網頁數量的增加,遇到了嚴重的可擴展性問題——如何解決數十億網頁的存儲和索引問題。 2003年穀歌發表了三篇論文: GFS——Google FileSystem   描述數據存儲的思想,解決了海量數據如何存儲的問題。 MapReduce——描述分佈
相關文章
相關標籤/搜索