Spark排錯與優化

文章目錄 一. 運維 1. Master掛掉,standby重啓也失效 2. worker掛掉或假死 二. 運行錯誤 1.shuffle FetchFailedException 2.Executor&Task Lost 3.傾斜 4.OOM 5.task not serializable 6.driver.maxResultSize過小 7.taskSet too large 8. driver

>>阅读原文<<