正確提交spark到yarn的demo

    經過Spark-submit在xshell提交命令行,若是集羣配置了keberos的話須要在打包的jar中進行認證,認證文件上傳到節點而且須要分發到每個節點,節點之間須要無密碼ssh登陸。java     由於是經過Spark-submit提交程序,因此在代碼當中的SparkConf設置爲shell .setMaster("yarn-cluster") 若是提交顯示classnotfoun
相關文章
相關標籤/搜索