Flume+Spark+Hive+Spark SQL離線分析系統

前段時間把Scala和Spark一塊兒學習了,因此藉此機會在這裏作個總結,順便和你們一塊兒分享一下目前最火的分佈式計算技術Spark!固然Spark不光是能夠作離線計算,還提供了許多功能強大的組件,好比說,Spark Streaming 組件作實時計算,和Kafka等消息系統也有很好的兼容性;Spark Sql,可讓用戶經過標準SQL語句操做從不一樣的數據源中過來的結構化數據;還提供了種類豐富的M
相關文章
相關標籤/搜索