MapReduce作業提交流程

MapReduce作業提交流程 1.客戶端運行一個MapReduce程序,這個程序就成一個job(作業) 2.客戶端向ResourcesManager申請資源 1.先檢查輸入/輸出 目錄是否存在等 2.通過第一步檢查後會返回資源(從NameNode上獲取數據的元數據信息,App_ID) 3.客戶端會通過元數據信息計算切片,讓後上傳資源文件到共享文件系統中(HDFS) (文件上傳在以Resource
相關文章
相關標籤/搜索