Spark RDD、DataFrame和DataSet的區別

轉載請標明出處：小帆的帆的專欄html RDD 優勢: java 編譯時類型安全 編譯時就能檢查出類型錯誤 面向對象的編程風格 直接經過類名點的方式來操做數據 缺點: python 序列化和反序列化的性能開銷 不管是集羣間的通訊, 仍是IO操做都須要對對象的結構和數據進行序列化和反序列化. GC的性能開銷 頻繁的建立和銷燬對象, 勢必會增長GC "") // 編譯時報錯, int不能跟String

>>阅读原文<<