Spark kyro序列化測試

spark官網給出的幾種調優點其中有一條是數據序列化 1.數據序列化,data serialization 1)java serialization(slow and large) 2)kyro serialization(qucikly compact) 註冊使用,不註冊性能相反 使用kryo的三種方式: 1)代碼中增加conf.set("spark.serializer", "org.apac
相關文章
相關標籤/搜索