Spark-RDD寬窄依賴及Stage劃分

1.術語解釋: Master(Standalone):資源管理的主節點(進程) Cluster Manager:在集羣上獲取資源的外部服務(例如standalone,Mesos,Yarn) Worker Node(standalone):資源管理的從節點(進程)或者說管理本機資源的進程 Application:基於Spark的用戶程序,包含了Driver程序和運行在集羣上的executor程序 D
相關文章
相關標籤/搜索