HDFS節點詳解 Google三大論文之一的GFS

設計思想 分而治之:將大文件、大批量文件,分佈式放在大量服務器上,以便於採取分而治之的方式對海量數據進行預算分析; 在大數據系統中的作用:爲各類分佈式運算框架(如:MapReduce,Spark等)提供數據存儲服務 重要概念:文件切塊,副本存放,元數據 HDFS架構 HDFS各節點 NameNode是HDFS的主節點,負責元數據的管理以及客戶端對文件的訪問。管理數據塊的複製,它週期性地從集羣中的每
相關文章
相關標籤/搜索