2017-11-27:關於實時存儲選型的考慮

數據特色:函數

1.數據量大,之做插入,不多更新性能

2.經過流計算的方式獲取,均擁有時間戳ui

業務需求orm

針對數據進行統計分析索引

對選型的要求擴展

通過上面的數據特色和業務需求,總結對存儲選型的要求數據類型

1.支持數據壓縮,節約存儲空間im

2.支持數據的分片或分區,同時支持水平擴展和垂直擴展技術

3.因爲須要在StormBolt中進行數據插入,因此插入性能必定要高時間戳

4.對時間段類型的查詢必定要快

5.能夠自動的擴展分片或分區,好比:每到新的一週,自動建立下一週的分區

6.有索引機制,除了時間查詢外能夠對業務標籤字段進行索引

7.有豐富的數據類型支持

8.有豐富的聚合函數供咱們使用

9.最好支持SQL和JDBC

10.能夠簡單的完成歷史數據的轉存。固然若是支持無限量存儲固然更好,但這也是不可能的。

 

如今的技術備選方案包括:Druid、TimescaleDB

相關文章
相關標籤/搜索