Spark在Executor上的內存分配

spark.serializer (default org.apache.spark.serializer.JavaSerializer )     建議設置爲 org.apache.spark.serializer.KryoSerializer,由於KryoSerializer比JavaSerializer快,可是有可能會有些Object會序列化失敗,這個時候就須要顯示的對序列化失敗的類進行Kr
相關文章
相關標籤/搜索