hadoop文件上傳解析

首先hadoop文件上傳是一個複雜的過程,下面就讓我們一下圖爲例進行簡單的過程解析。 由上圖客戶端上傳一個文件,比如上述路徑,首先hadoop平臺查詢內存元數據信息是否可以上傳,如果可以那麼namenode會分配需要上傳的datanode數信息,然後通知客戶端可以進行文件上傳此過程會使用遠程調用框架技術(RPC),這裏不在複述,然後客戶端根據返回樹信息進行文件上傳,上傳成功之後datanode通過
相關文章
相關標籤/搜索