SparkSQL DataSet

SparkSQL DataSet 1、概念 DataSet是分佈式的數據集合。DataSet是在Spark1.6中添加的新的接口。它集中了RDD的優點（強類型和可以用強大lambda函數）以及Spark SQL優化的執行引擎。DataSet可以通過JVM的對象進行構建，可以用函數式的轉換（map/flatmap/filter）進行多種操作。 2、DataFrame、DataSet、RDD的區別 假

>>阅读原文<<