大數據-MapReduce中的計數器

1. MapReduce 中的計數器 計數器是收集作業統計信息的有效手段之一,用於質量控制或應用級統計。計數器還可輔 助診斷系統故障。如果需要將日誌信息傳輸到 map 或 reduce 任務, 更好的方法通常是看 能否用一個計數器值來記錄某一特定事件的發生。對於大型分佈式作業而言,使用計數器 更爲方便。除了因爲獲取計數器值比輸出日誌更方便,還有根據計數器值統計特定事件的 發生次數要比分析一堆日誌文
相關文章
相關標籤/搜索