流式處理框架的特點

分佈式的流處理是對無界的數據集進行連續不斷的處理,聚合,分析的過程。延遲需要儘可能的低(毫秒級或秒級)。這類框架通常採用有向無環圖(DAG)來描述和處理作業拓撲。(線性處理也是一種DAG)。他們一般會抽取此類系統的底層通用模型,保證其易用性,健壯性和可擴展性。讓開發者專注於業務實現。 流式處理框架一般會包含如下特點: 消息傳輸正確性保證:此類保障有三種: At Most Once:在框架中每條消息
相關文章
相關標籤/搜索