hive on spark 讀取json數據失敗

昨天幫朋友分析了個問題:hive on spark場景下,使用json數據格式存儲文件,使用hive自帶的序列化方式。當計算引擎爲mr時,可以正常讀取,使用spark引擎時報錯。 建表語句如下: 報錯如下: 看到這個報錯,估計是序列化和反序列化方式不匹配導致的,查看日誌,果然是因爲找不到反序列化器。日誌報錯如下: 解決思路: 1.將hive序列化方式的jar包添加到spark的lib目錄下。 2.
相關文章
相關標籤/搜索