流式計算框架

流式計算框架 S4sql S4會將數據裏的每一條記錄包裝成event事件，每一個事件是一個KV對，同時有eventType來標示這個事件的類型。框架 PE是S4中的基本運算單元。每一個PE只負責處理本身所關心的eventtype,而且只處理本身所對應的key值的event。PE處理後可能輸出一個或多個event。就像hadoop上的map,reduce的接口實現相似的。工具 ProcessingN

>>阅读原文<<