大數據-第10章 spark 概況

執行流程 ①用戶編寫spark語句運行程序 ②生成一個application以及運行環境driver ③生成一個sparkcontext以及向資源管理器申請運行application的資源 ④資源管理器向exceutor分配資源,並且啓動exceutor ⑤sparkcontext解析spark程序 (1).生成spark的RDD對象 (2).根據RDD對象生成DAG關係依賴圖 (3).將DAG關
相關文章
相關標籤/搜索