日均處理萬億條數據,愛奇藝實時計算平臺設計

1.愛奇藝 Flink 服務現狀 愛奇藝從 2012 年開始開展大數據業務,一開始只有二十幾個節點,主要是 MapReduce、Hive 等離線計算任務。到 2014 年左右上線了 Storm、Spark 實時計算服務,並隨後發佈了基於 Spark 的實時計算平臺 Europa。2017 年開始引入 Flink,用來替代部分 Spark Streaming 場景,滿足更低延遲的實時計算需求。在這之
相關文章
相關標籤/搜索