MapReduce當中的計數器

MapReduce當中的計數器 計數器是收集作業統計信息的有效手段之一,用於質量控制或應用級統計 計數器還可輔助診斷系統故障。 如果需要將日誌信息傳輸到map 或reduce 任務, 更好的方法通常是看能否用一個計數器值來記錄某一特定事件的發生。 對於大型分佈式作業而言,使用計數器更爲方便。除了因爲獲取計數器值比輸出日誌更方便,還有根據計數器值統計特定事件的發生次數要比分析一堆日誌文件容易得多。
相關文章
相關標籤/搜索