spark-shell --master yarn模式下 com.hadoop.compression.lzo.LzoCodec not found.

錯誤原因 筆者在hadoop中配置了編解碼器lzo,所以當使用yarn模式時,spark自身沒有lzo的jar包所以無法找到! 解決辦法 將lzo的jar包路徑給spark! 配置spark-default.conf文件!
相關文章
相關標籤/搜索