spark學習部分筆記

每一個 Spark 應用都由一個驅動器程序（driver program）來發起集羣上的各類並行操做。驅動器程序包含應用的 main 函數， 驅動器程序經過一個 SparkContext 對象來訪問 Spark。 調用了sc.textFile() 來建立一個表明文件中各行文本的 RDD 驅動器程序通常要管理多個執行器（executor）節點。 val conf = new SparkConf().

>>阅读原文<<