YARN提交job的流程

YARN是hadoop的分佈式資源管理器,可以爲不同的應用提供統一的資源管理和調度,如mapreduce、spack等 yarn提交job的流程: 首先客戶端向Resourcemanage提交作業,申請job ID,RM把此請求交給ApplicationManage,AM處理該請求返回一個作業id和一個hdfs路徑。客戶端接收到該jobid和hdfs路徑,把此job所需的資源(jar包、配置信息,
相關文章
相關標籤/搜索