Flink 分佈式緩存 廣播變量 區別

區別: 1.廣播變量是基於內存的,是將變量分發到各個worker節點的內存上(避免多次複製,節省內存) 2.分佈式緩存是基於磁盤的,將文件copy到各個節點上,當函數運行時可以在本地文件系統檢索該文件(避免多次複製,提高執行效率)   分佈式緩存: Flink提供了一個分佈式緩存,類似於hadoop,可以使用戶在並行函數中很方便的讀取本地文件,並把它放在taskmanager節點中,防止task重
相關文章
相關標籤/搜索