基於RDD建立DataFrame

Spark SQL 支持兩種不一樣的方法用於轉換已存在的 RDD 成爲 Dataset。sql 第一種方法是使用反射去推斷一個包含指定的對象類型的 RDD 的 Schema。在你的 Spark 應用程序中當你已知 Schema 時這個基於方法的反射能夠讓你的代碼更簡潔。不過這種方法要求你在寫程序時已經知道RDD對象的結構信息，由於須要提早根據該結構信息來定義case class。apache 第二

>>阅读原文<<