Hadoop架構簡介

Google大數據技術:MapReduce、BigTable、GFS,Google只發布了相關的技術論文,沒有開源。Hadoop是一個模仿谷歌大數據技術的開源實現。Hadoop是一個開源的分佈式存儲+分佈式計算的平臺。包括兩個核心:HDFS(分佈式文件系統,存儲海量數據)和MapReduce(並行處理框架,實現任務的分解和調度) HDFS的文件被分成塊(Block)進行存儲,塊的默認大小是64MB
相關文章
相關標籤/搜索