spark提交任務時breeze包衝突問題

spark提交任務: 出現如下問題: 分析&解決: 造成這個原因有兩個: 一是在提交任務時候breeze包沒有添加,啓動時候添加--jars breeze_2.11-0.13.1.jar即可 二是由於spark本身的breeze包版本不一樣,缺失所需的函數,而spark啓動時候默認優先讀取spark內部breeze包。解決方法是在啓動時候添加配置--driver-class-path breeze
相關文章
相關標籤/搜索