流式計算的表明:Storm、Flink、Spark Streaming

我前面介紹的大數據技術主要是處理、計算存儲介質上的大規模數據,這類計算也叫大數據批處理計算。顧名思義,數據是以批爲單位進行計算,好比一天的訪問日誌、歷史上全部的訂單數據等。這些數據一般經過HDFS存儲在磁盤上,使用MapReduce或者Spark這樣的批處理大數據計算框架進行計算,通常完成一次計算須要花費幾分鐘到幾小時的時間。編程 此外,還有一種大數據技術,針對實時產生的大規模數據進行即時計算處理
相關文章
相關標籤/搜索