hbase實時優化思路

問題的提出 基於hbase的實時架構圖如上圖所示(也有其它基於TiDB的毫秒級別的實時,這裏屬於僞實時H+1)。 目前報表的H+1任務的數據都是通過讀取binlog消息存入導hbase的。在對這些數據做計算需要在hive上,此時也就需要把數據從hbase導入hive中。最後通過一系列計算把結果export到指定數據庫. 在hbase->hive的過程中使用的方法爲:現在的實現方法爲:在hive上建
相關文章
相關標籤/搜索