經過spark-shell腳本,剖析spark程序提交流程

vim打開spark-shell腳本能夠看到下面這段腳本html spark-shell代碼片斷: java 能夠看到在spark-shell腳本中調用了spark-submit腳本,打開spark-submit腳本發現包含以下腳本: python 能夠看到在spark-submit腳本中,首先檢查是否設置了SPARK_HOME,而後調用了spark-class,增長了參數SparkSubmit。
相關文章
相關標籤/搜索