大數據統一的批處理和流處理標準 Apache Beam

Apache Beam 是 Apache 軟件基金會越來越多的數據流項目中最新增添的成員,是 Google 在2016年2月份貢獻給 Apache 基金會的孵化項目。 這個項目的名稱表明了設計:結合了批處理(Batch)模式和數據流(Stream)處理模式。它基於一種統一模式,用於定義和執行數據並行處理管道(pipeline),這些管理隨帶一套針對特定語言的SDK用於構建管道,以及針對特定運行時環
相關文章
相關標籤/搜索