大數據系統的基礎,大數據存儲和計算技術

在存儲方面,2000 年左右谷歌等提出的文件系統(GFS)、以及隨後的 Hadoop 的分佈式文件系統 HDFS(Hadoop Distributed File System)奠定了大數據存儲技術的基礎。 與傳統系統相比,GFS/HDFS 將計算和存儲節點在物理上結合在一起,從而避免在數據密集計算中易形成的 I/O吞吐量的制約,同時這類分佈式存儲系統的文件系統也採用了分佈式架構,能達到較高的併發訪
相關文章
相關標籤/搜索