關於HDFS的 block、packet與chunk詳解

block、packet與chunk 在DFSClient寫HDFS的過程中,有三個需要搞清楚的單位:block、packet與chunk; block是最大的一個單位,它是最終存儲於DataNode上的數據粒度,由dfs.block.size參數決定,默認是64M;注:這個參數由客戶端配置決定; packet是中等的一個單位,它是數據由DFSClient流向DataNode的粒度,以dfs.wr
相關文章
相關標籤/搜索