YARN的Log Aggregation原理

文章目錄 前言 Log Aggregation 日誌的匯聚 日誌的retain策略 Log Aggregation的查詢 Log Aggregation流程圖 前言 在大數據的時代,我們想從數據中去分析提煉出有價值的東西,背後有時是成百上千個任務的運算結果。在一些比較大的數據平臺的規模下,出一份第二天的詳盡的數據報表信息,需要前一天跑上數十萬級別的任務數。更直接地來說,我們的計算平臺單日內需要調度
相關文章
相關標籤/搜索