hdfs寫流程和MR緩衝區

一.hdfs的寫流程 1. 客戶端發起RPC請求到NameNode 2. NameNode收到請求之後，進行校驗： a. 校驗用戶是否有操作權限 b. 校驗這個文件是否存在 3. 記錄元數據，計算這個文件的塊的數量同時分配塊的存儲地址 4. NameNode就會將地址放入隊列中返回給客戶端 5. 客戶端收到隊列之後，會從隊列中取出地址來進行寫入 6. 在寫的時候，客戶端會先將數據進行封包(pack

>>阅读原文<<