有離線處理和實時計算對比

在大數據的數據處理中:有離線處理和實時計算對比web 分別在如下四個方面有所區別 1. 存儲,即數據來源框架 離線通常存儲在HDFS,並且數據量大 實時計算的話,通常是消息隊列,如kalka,須要實時增長 /修改 記錄過來的某一時間內的某一批次的數據 2 處理過程,使用框架svg 離線:MapReduce: Map + Reduce 實時:Spark(DStream/SS) 或者 Storm \
相關文章
相關標籤/搜索