spark推測執行的坑

一、spark推測執行開啓spa 設置 spark.speculation=true便可kafka 二、spark開啓推測執行的好處spark 推測執行是指對於一個Stage裏面運行慢的Task，會在其餘節點的Executor上再次啓動這個task，若是其中一個Task實例運行成功則將這個最早完成的Task的計算結果做爲最終結果，同時會幹掉其餘Executor上運行的實例，從而加快運行速度io 三

>>阅读原文<<