Java本地模式開發Spark程序開發遇到的問題

1. spark應用打成Jar包提交到spark on yarn執行時依賴衝突 解決：使用maven項目開發時，能夠把spark、scala、hadoop相關依賴添加如下標籤 <scope>provided</scope> 例如：java <dependencies> <!-- scala-library --> <dependency> <groupId>org.

>>阅读原文<<