【Flink】Flink on RocksDB 參數調優指南

1. 背景 對於需要保存超大狀態(遠超於內存容量)的流計算場景來說,目前 RocksDB [1] 是 Flink 平臺上官方實現的唯一選擇。業界也有使用 Redis 等其他服務作爲狀態後端的方案,但終究不夠成熟,且已被社區否決 [2]. 基於我們長期的狀態調優經驗,通過合理的資源分配,RocksDB 方案可以穩定支持上百 GB 甚至上 TB 的總狀態量;但是衆所周知的是,RocksDB 的可調參數
相關文章
相關標籤/搜索