Spark-Yarn架構介紹

1.簡介 MapReduct框架從hadoop-0.23版本以後發生了重大的變革, 新的計算框架我們稱爲MapReudce 2.0 或者 YARN(Yet-Another-Resource-Negotiator) 這篇文章主要是簡單的介紹YARN的架構, 因爲後續我們都會使用YARN提交Spark程序 MapReduct 2.0最主要的變革是把資源分配和任務調度隔離. 一個全局的資源管理稱爲Res
相關文章
相關標籤/搜索