Apache Kafka基準測試:每秒寫入2百萬(在三臺廉價機器上)(二)

生產者吞吐量與存儲數據 許多消息系統的隱藏危險之一是,對於在內存中保留的數據,它們工作的很好。但當數據備份不消耗(因此需要存儲在磁盤上)時,它們的吞吐量下降一個數量級(或更多)。這意味着只要您的消費者保持消息隊列及時清掉,事情就可以正常運行。但是一旦它們滯後,整個消息層將備份未消耗的數據。備份導致數據進入磁盤,這反過來會導致性能下降到一個速率,這意味着消息傳遞系統不能再跟上傳入的數據,並把它們備份
相關文章
相關標籤/搜索