NodeManager中分佈式緩存機制

分佈式緩存介紹        在Yarn中,分佈式緩存是一種分佈式文件分發與緩存機制,類似於MRv1中的Distrubuted Cache,其主要作用就是將用戶應用程序執行時所需的外部文件資源自動透明的下載緩存到各個節點,從而省去了用戶手動部署這些文件麻煩。 YARN分佈式緩存工作流程如下: 客戶端將應用程序所需的文件資源(外部字典、JAR包、二進制文件)提交到HDFS上。 客戶端將應用程序提交到
相關文章
相關標籤/搜索