Spark任務中Stage劃分算法及Task任務本地性算法原理

http://www.aboutyun.com/thread-19729-1-1.html   問題導讀： 1、Spark Job Stage劃分算法有哪些？ 2、Task最佳計算位置算法如何理解？ 3、Task任務本地算法運用場景有哪些？ 一、Stage劃分算法 由於Spark的算子構建一般都是鏈式的，這就涉及了要如何進行這些鏈式計算，Spark的策略是對這些算子，先劃分Stage，然後在進行計

>>阅读原文<<