流式計算——storm背景引入

一、離線計算與流式計算 離線計算 離線計算:批量獲取數據、批量傳輸數據、週期性批量計算數據、數據展示 代表技術:Sqoop批量導入數據、HDFS批量存儲數據、MapReduce批量計算數據、Hive批量計算數據、***任務調度 主要工作:hivesql、調度平臺、Hadoop集羣運維、數據清洗(腳本語言)、元數據管理、數據稽查、數據倉庫模型架構 流式計算  流式計算:數據實時產生、數據實時傳輸、數
相關文章
相關標籤/搜索