Spark SQL內置函數的使用Spark SQL執行計劃總結

我的感受Spark SQL的優點在於UDF和DataFrame(RDD的封裝，因爲RDD是能夠是任意類型，所以能夠封裝一個對象在RDD裏面，spark2.0之後對DataSet作了優化，因爲DataFrame是弱類型的判斷，DataSet是靜態類型的在數據的優化和性能上應該有更大的提高)sql 本文的操做spark 1.6.1apache 內置函數 須要倒入 importorg.apache.sp

>>阅读原文<<