Spark架構綜述

一、Spark概述 1、什麼是Spark Spark是一種快速、通用、可擴展的大數據分析引擎。它集批處理、實時流處理、交互式查詢和圖計算於一體,避免了多種運算場景下需要部署不同集羣帶來的資源浪費。 2、Spark的優點 ①速度。與hadoop的MR相比,Spark的運算要快100倍以上;而基於硬盤的計算也要快10倍以上。 ②易用。Spark支持java、python、scala的API,還支持超過

>>阅读原文<<