如何爲Kafka集羣選擇合適的Topic/Partitions數量

大數據技術與架構 點擊右側關注,大數據開發領域最強公衆號! 暴走大數據 點擊右側關注,暴走大數據! 本文介紹一些與本問題相關的一些重要決策因素,並提供一些簡單的計算公式 越多的分區可以提供更高的的吞吐 首先要明白,在kafka中,單個partition是kafka並行操作的最小單元,在producter和broker端,向每一個分區寫入數據是完全可以並行的,此時,可以通過加大硬件資源的利用率來提升
相關文章
相關標籤/搜索