HDFS 基本原理

隨着互聯網的發展,數據日益增多,增長超過了單機能夠處理的上線,數據如何存儲和處理成爲了科技公司的難題,隨着google的三篇論文的發佈,大家終於找到了一個方案-分佈式文件系統+MapReduce。Hadoop是參考google論文實現的,集成了分佈式文件系統與分佈式批處理平臺。hadoop的設計目標是用來解決大文件海量存儲和批處理的,爲了避免單個節點故障導致數據丟失,設計副本冗餘機制。 本文將主要
相關文章
相關標籤/搜索