HADOOP1.X中HDFS工作原理

HDFS有很多特點: ① 保存多個副本,且提供容錯機制,副本丟失或宕機自動恢復。默認存3份。 ② 運行在廉價的機器上。 ③ 適合大數據的處理。多大?多小?HDFS默認會將文件分割成block,64M爲1個block,不足一64M的就以實際文件大小爲block存在DataNode中。然後將block按鍵值對(形如:Block1: host2,host1,host3)存儲在HDFS上,並將鍵值對的映射
相關文章
相關標籤/搜索