Hadoop-MapReduce+Yarn核心原理

1. MapReduce 核心:Hadoop體系下一個編程模型(計算框架),主要是用來操作HDFS中存儲數據並對HDFS中數據進行計算 2. Map+Reduce Map:用來對局部數據進行運算 局部運算 Reduce:對局部運算的結果做彙總運算 彙總運算 3. Yarn(統一資源調度器,任務資源管理器) a. 整合hadoop集羣中資源(CPU,內存)進行統一調度。 比如:12核,1234G;
相關文章
相關標籤/搜索