Spark編程

一、Spark系統 spark相當於是一個優化了Hadoop裏面MapReduce的程序，它主要以scala編程爲基礎。 在實際應用中，大數據處理主要包括以下幾個類型：  複雜的批量數據處理：時間跨度通常在數十分鐘到數小時之間；（主要用Spark Core來實現）  基於歷史數據的交互式查詢：時間跨度通常在數十秒到數分鐘之間；（主要用Spark SQL來實現）  基於實時數據流的數據處理：時

>>阅读原文<<