Spark處理框架

Spark：an unified analytics engine for large-scale data processing Spark VS MapReduce MapReduce implementation principles 對於一個MapReduce作業來說，大致操作爲： 可以發現，其主要的改變就是文件內容的變化 中間結果需要寫磁盤，開銷非常大 Hadoop MapReduce局

>>阅读原文<<