個人對於HDFS的上傳以及合併的理解

這是模擬一個300M的文件在HDFS上傳的過程 在長時間的運行後NameNode內存裏的edit-logs文件變的很大,如果此時NameNode掛掉了那麼內存裏的fsimage文件會丟失,導致很大的損失。 SencondaryNameNode會定期(時間可以調整)和定量(edits的大小到一定值)進行checkpoint操作,在NameNode下載edits和fsimage合併後生成新的fsima
相關文章
相關標籤/搜索