Spark架構角色及基本運行流程

1. 集羣角色 Application:基於spark的用戶程序,包含了一個Driver program 和集羣中多個Executor Driver Program:運行application的main()函數並自動創建SparkContext。Driver program通過一個SparkContext對象來訪問Spark,通常用SparkContext代表Driver。 SparkContex
相關文章
相關標籤/搜索