spark遠程debug之調試spark on yarn 程序(基於CDH平臺,1.6.0版本)

簡介         由於 spark有多種運行模式,遠程調試的時候,雖然大體步驟相同,但是還是有小部分需要注意的地方,這裏記錄一下調試運行在spark on yarn模式下的程序。 環境準備         需要完好的Hadoop,spark集羣,以便於提交spark on yarn程序。我這裏是基於CDH的環境           步驟             1.隨便寫個spark程序,比如
相關文章
相關標籤/搜索