使用 IntelliJ IDEA打包Spark應用程序

近年來隨着大數據不斷升溫，並行數據分析變得愈來愈流行，各類分佈式計算框架應運而生。Spark最先起源於加州大學伯克利分校AMP實驗室的一個研究項目，實驗室的研究人員曾經使用過Hadoop MapReduce，他們發現MapReduce在迭代計算和交互計算的任務上效率表現不佳，所以Spark從一開始就是爲交互式查詢和迭代算法設計的，同時還支持內存式儲存和高效的容錯機制。 Spark做爲下一代大數據處

>>阅读原文<<