Spark Datasets介紹

1.1背景 從Spark1.3.0版本開始推出DataFrame，DataFrame讓Spark具有了處理大規模結構化數據的能力，在比原有的RDD轉化方式易用的前提下，計算性能更快。發佈DataFrame以後開發者收到了不少反饋，其中一個主要的是你們反映缺少編譯時類型安全。爲了解決這個問題，Spark採用新的 Dataset API (DataFrame API的類型擴展)。sql 從Spark1

>>阅读原文<<