SparkSQL操作Hive Table

Spark SQL支持對Hive的讀寫操作。然而因爲Hive有很多依賴包，所以這些依賴包沒有包含在默認的Spark包裏面。如果Hive依賴的包能在classpath找到，Spark將會自動加載它們。需要注意的是，這些Hive依賴包必須複製到所有的工作節點上，因爲它們爲了能夠訪問存儲在Hive的數據，會調用Hive的序列化和反序列化(SerDes)包。Hive的配置文件hive-site.xml、c

>>阅读原文<<