SparkSQL Catalog的做用和訪問Hive元數據信息

SparkSQL Catalog的做用: SparkSQL直接訪問hive元數據信息,再也不須要去mysql裏的表裏去查找 Spark 2.0中添加了標準的API(稱爲catalog)來訪問Spark SQL中的元數據。這個API既能夠操做Spark SQL,也能夠操做Hive元數據。mysql 代碼操做: package g5.learning import org.apache.spark.
相關文章
相關標籤/搜索