Spark提交做業的流程以及做業是如何被觸發在集羣中運行的

首先使用腳本spark-submit將做業提交,這個過程實際上就是使用shell腳本調用java命令運行的SparkSubmit類的main方法,因此咱們接下來須要看一下SparkSubmit的main方法作了什麼?java /** * 提交做業 * @param args */ def main(args: Array[String]): Unit = {
相關文章
相關標籤/搜索