hadoop之hdfs、yarn、MR相關總結

簡介:這裏對之前的hdfs、yarn、MR相關概念做一個總結,方便快速閱讀理解。 一、HDFS HDFS是分佈式文件系統,有高容錯性的特點,可以部署在價格低廉的服務器上,主要包含namenode和datanode。 Namenode是hdfs中文件目錄和文件分配管理者,它保存着文件名和數據塊的映射管理,數據塊和datanode列表的映射關係。其中文件名和數據塊的關係保存在磁盤上,但是namenod
相關文章
相關標籤/搜索