Spark transform操做的很是規使用 - SparkContext.runJob()方法的調用

前文      通常場景中,Spark計算任務中transform相關的操做都是由action進行觸發的,常見的的好比write、collect、show等,或者在數據處理的過程當中調用的groupbykey等API,進行shuffle數據從新分發,在提交任務時會把transform的操做做爲前置任務進行提交,可是單純的transform操做是沒法觸發spark計算任務的。java     可是,
相關文章
相關標籤/搜索