Spark部署模式詳解

1、Spark部署模式詳解 在介紹部署模式之前,首先需要知道兩個重要的角色:Driver(驅動器)、Executor(執行器)。 1、1Driver(驅動器) Spark驅動器是執行開發程序中的main方法的進程。它負責開發人員編寫的用來創建SparkContext、創建RDD、以及進行RDD的轉化(transform)操作和行動(action)操作代碼的執行。如果你是用的spark shell,
相關文章
相關標籤/搜索