基於Kubernetes的Spark集羣部署和測試

基於Kubernetes的Spark集羣部署和測試 1、構建Docker鏡像 2、在Kubernetes上建立Spark集羣 3、測試Spark的一個簡單應用   Spark是新一代分佈式內存計算框架,Apache開源的頂級項目。相比於Hadoop Map-Reduce計算框架,Spark將中間計算結果保留在內存中,速度提高10~100倍;同時它還提供更豐富的算子,採用彈性分佈式數據集(RDD)實
相關文章
相關標籤/搜索