Flink Slot詳解與Job Execution Graph優化

前言 近期將Flink Job從Standalone遷移至了OnYarn,隨後發現Job性能較之前有所降低:遷移前有8.3W+/S的數據消費速度,遷移到Yarn後分配同樣的資源但消費速度降爲7.8W+/S,且較之前的消費速度有輕微的抖動。經過原因分析和測試驗證,最終採用了在保持分配給Job的資源不變的情況下將總Container數量減半、每個Container持有的資源從1C2G 1Slot變更爲
相關文章
相關標籤/搜索