Hadoop隨筆——資源調度框架

資源調度框架——YARN YARN的產生背景 MapReduce1.x存在的問題:單點故障(JT)&節點(JT)壓力大不易拓展&必能支持除了reduce之外的作業 它也是採用類似的心跳機制 資源利用率低&運維成本高 由此催生了YARN,是的不同計算框架可以共享同一個HDFS集羣上的數據,享受整體的資源調度, 不同的計算框架在YARN上面工作的好處:按資源需要分配,進而提高集羣資源的利用率 YARN
相關文章
相關標籤/搜索