大數據Hadoop之HDFS讀取過程總結

讀取流程原理: 1.HDFS Client與NN通信,獲取文件信息: 文件有多少塊,分別在哪些DN上 2.業務調用read API 進行讀寫文件操作 3.HDFS Clien根據NN返回的元數據信息,與DN通信 此處Client採用就近原則讀取數據,數據有多塊時,不同DN,Client會同時與多個DN通信,獲取數據塊 4.數據讀取完成以後,業務調用close關閉連接,讀取結束 當Client與NN
相關文章
相關標籤/搜索