Hadoop-HDFS讀寫數據

HDFS中的block、packet、chunk  block :這個大家應該知道,文件上傳前需要分塊,這個塊就是block,一般爲128MB,當然你可以去改,不顧不推薦。因爲塊太小:尋址時間佔比過高。塊太大:Map任務數太少,作業執行速度變慢。它是最大的一個單位。 packet :packet是第二大的單位,它是client端向DataNode,或DataNode的PipLine之間傳數據的基本
相關文章
相關標籤/搜索