通過spark-shell腳本,剖析spark程序提交流程

vim打開spark-shell腳本可以看到下面這段腳本 spark-shell代碼片段: 可以看到在spark-shell腳本中調用了spark-submit腳本,打開spark-submit腳本發現包含如下腳本: 可以看到在spark-submit腳本中,首先檢查是否設置了SPARK_HOME,然後調用了spark-class,增加了參數SparkSubmit。 打開spark-class腳本
相關文章
相關標籤/搜索