storm學習(一)——storm原理及安裝

一、storm的基本原理: 1、離線計算是什麼? 離線計算:批量獲取數據、批量傳輸數據、週期性批量計算數據、數據展示 代表技術:Sqoop批量導入數據、HDFS批量存儲數據、MapReduce批量計算數據、Hive批量計算數據、***任務調度 1,hivesql:工作中的重中之重; 2、調度平臺 3、Hadoop集羣運維 4、數據清洗(腳本語言) 5、元數據管理 6、數據稽查:看數據中有沒有垃圾數
相關文章
相關標籤/搜索