spark基本概念(二)

Application 用戶編寫的Spark應用程序。Application的main方法爲應用程序的入口,用戶通過Spark的API,定義了RDD和對RDD的操作。 Job 提供給Spark運行的作業,一個Application中以Action爲劃分邊界往往會產生多個Job。Spark採用惰性機制,對RDD的創建和轉換並不會立即執行,只有在遇到Action時纔會生成一個Job,然後統一調度執行。
相關文章
相關標籤/搜索