Hadoop之HDFS工作原理

HDFS特點 HDFS(Hadoop Distributed File System )Hadoop分佈式文件系統。 HDFS有如下特點: 保存多個副本,且提供容錯機制,副本丟失或宕機自動恢復。默認存3份。 運行在廉價的機器上。 適合大數據的處理。HDFS默認會將文件分割成block,64M爲1個block。然後將block按鍵值對存儲在HDFS上,並將鍵值對的映射存到內存中。如果小文件太多,那內
相關文章
相關標籤/搜索