60-124-340-源碼-運行模式-Yarn-通過 YARN 的資源本地化技術減少 Flink 在 YARN 上的部署時間

1.美圖 2.概述 在使用 Flink 的生產實踐中,我們發現採用 Flink on YARN 的部署方式時,將大量用戶依賴的 JAR 包和其他文件上傳到對應的容器中是從用戶發送部署請求到應用實際運行起來的重要耗時操作。其中,不少文件例如 Flink 框架本身的依賴對於每個應用來說都是一樣的,如果能採用一個統一的緩存將會顯著減少所需上傳的文件大小;此外,許多用戶依賴的 JAR 包只在運行時需要,而
相關文章
相關標籤/搜索