【Spark運行模式】

Spark支持4種運行模式:   本地單機模式 本地單機模式下,所有的Spark進程均運行於同一個JVM中,並行處理則通過多線程來實現。在默認情況下,單機模式啓動與本地系統的CPU核心數目相同的線程。如果要設置並行的級別,則以local[N]的格式來指定一個master變量,N表示要使用的線程數目。   集羣單機模式 Spark集羣由兩類程序構成:一個驅動程序和多個執行程序。本地模式時所有的處理都
相關文章
相關標籤/搜索