IDEA遠程提交運行HDFS的Spark程序--優化篇1

以前說到,我能夠直接讓spark程序去引用HDFS上的jar包路徑,解決由於上傳依賴jar包致使的時間過長的問題。web 上次還有一個遺留問題,我必需要在hadoop-yarn-common-2.6.4.jar包下的 yarn-default.xml中修改hostname的值才能夠正常提交,這顯然不符合正常使用的要求,我配置了那麼多信息,難道必須在各個jar包從新設置嗎?ide 我從新觀察瞭如下正
相關文章
相關標籤/搜索