RDD轉換成DataFrame的兩種方式

1、概述 Spark SQL支持兩種不一樣的方式將RDD轉換爲DataFrame。第一種是使用反射來推斷包含特定類型對象的RDD的模式,這種基於反射的方式能夠提供更簡潔的代碼,若是在編寫Spark應用程序時,已經明確了schema,能夠使用這種方式。第二種方式是經過可編程接口來構建schema,而後將其應用於現有的RDD。此方式編寫的代碼更冗長,但在不知道colum及其type的狀況下,能夠使用這
相關文章
相關標籤/搜索