分佈式資源調度框架YARN總結

1.產生背景 Hadoop1.x時: MapReduce:Master/Slave架構,1個JobTracker帶多個TaskTracker JobTracker: 負責資源管理和作業調度 TaskTracker: 定期向JT彙報本節點的健康狀況、資源使用情況、作業執行情況; 接收來自JT的命令:啓動任務/殺死任務 產生問題:單點故障,節點壓力大不易擴展 YARN:不同計算框架可以共享同一個HDF
相關文章
相關標籤/搜索