RDD DataFrame DataSet 區別和轉換

RDD、DataFrame和DataSet是容易產生混淆的概念，必須對其相互之間對比，纔可以知道其中異同。 RDD和DataFrame RDD-DataFrame 上圖直觀地體現了DataFrame和RDD的區別。左側的RDD[Person]雖然以Person爲類型參數，但Spark框架本身不瞭解 Person類的內部結構。而右側的DataFrame卻提供了詳細的結構信息，使得Spark SQL可

>>阅读原文<<