Spark之本地模式與集羣模式

Spark之本地模式與集羣模式 1.spark-shell的本地模式和集羣模式 1.1 local本地模式 直接啓動spark-shell命令窗口 腳本啓動後，會生成一個SparkContext的上下文對象sc。並且啓動的是本地模式(local)。如圖： 1.1.1 加載本地數據 sc.textFile("file:///home/hadoop/words.txt").flatMap(_.spli

>>阅读原文<<