智能運維 | 百度海量日誌處理——任務調度實踐與優化

本文主要介紹百度雲智能運維架構團隊在處理大規模日誌計算任務時，爲保證任務分配均勻性和穩定性，對原始一致性哈希算法進行改進。新算法在保持原始一致性哈希算法穩定性的同時，通過設置不均衡因子來控制分配的不均勻範圍，達到負載分配均勻性與穩定性有效兼容。  業務場景  分佈式系統中我們經常會面對如下業務場景： 計算系統每分鐘有大量的定時任務需要及時調度並按時完成，單機在處理能力和時效性上都無法滿足要求，需要

>>阅读原文<<