笨鳥的平凡之路-記一次spark錯誤

在集羣運行spark時出現java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object;) 查詢得知是版本對應問題 CDH版的spark是1.6.0版本 本地編寫代碼中的pom文件引用的是2.2.3版本的Spark 之後在集羣部署了2.X版本的Spark 2 然後在控制檯找到類似: /opt/cloudera/p

>>阅读原文<<