Spark數據分析基礎

spark大數據分析基礎 一、spark簡介 1.1 Spark程序 （1）驅動器程序 從上層來看，每一個Spark應用都由一個驅動器程序（driver program）來發起集羣上的各類並行操做。驅動器程序包含應用的main函數，而且定義了集羣上的分佈式數據集，還對這些分佈式數據集應用了相關操做。在spark-shell中，實際的驅動器程序就是Spark shell自己，你只須要輸入想要運行的操

>>阅读原文<<