Hadoop YARN:調度性能優化實踐

背景 YARN做爲Hadoop的資源管理系統,負責Hadoop集羣上計算資源的管理和做業調度。html 美團的YARN以社區2.7.1版本爲基礎構建分支。目前在YARN上支撐離線業務、實時業務以及機器學習業務。node 離線業務主要運行的是Hive on MapReduce, Spark SQL爲主的數據倉庫做業。 實時業務主要運行Spark Streaming,Flink爲主的實時流計算做業。
相關文章
相關標籤/搜索