基於Spark SQL在生產環境中實現即席查詢

大數據的核心是處理大量的數據，然後分析，挖掘。大數據火的本質原因是互聯網的興起帶動大量用戶使用，由此產生大量數據，這麼多數據是以前的單臺機器無法在規定時間內處理完的，由此產生了需要用多臺電腦一起計算的思想。 因此在計算機軟件領域就產生了一系列的大數據技術，比如Hadoop，hdfs,storm,Spark等等。至於爲什麼會產生這麼多技術，關鍵的問題是一是用戶的大量使用，二是硬件的發展趕不上軟件的發

>>阅读原文<<