Spark在Executor上的內存分配

spark.serializer (default org.apache.spark.serializer.JavaSerializer )     建議設置爲 org.apache.spark.serializer.KryoSerializer，由於KryoSerializer比JavaSerializer快，可是有可能會有些Object會序列化失敗，這個時候就須要顯示的對序列化失敗的類進行Kr

>>阅读原文<<