Spark學習筆記(4)Spark Streaming的Exactly-One的事務處理

本文內容 1 Exactly Once 2 輸出不重複 1 Exactly Once   事務:   銀行轉帳爲例,A用戶轉筆賬給B用戶,如果B用戶沒收到賬,或者收到多筆賬,都是破壞事務的一致性。事務處理就是,能夠處理且只會處理一次,即A只轉一次,B只收一次。   從事務視角解密SparkStreaming架構:   SparkStreaming應用程序啓動,會分配資源,除非整個集羣硬件資源崩潰,
相關文章
相關標籤/搜索