大數據平臺Lambda架構淺析(全量計算+增量計算)

筆者剛接觸大數據方面時,只知道Hadoop和時下很火的Spark,對Hadoop、Spark的認知只停留在跑跑demo,寫點離線小app,後來隨着學業項目的須要,開始逐步瞭解時下工業界的大數據平臺是如何搭建起來的。在搜刮大量資料後,從一篇paper裏看到Lambda這一陌生的字眼,再一搜,發現這正是我須要的大數據平臺基礎架構。Oryx2正是基於Lambda架構和Spark搭建的大數據處理開源框架。
相關文章
相關標籤/搜索