Tez學習筆記 --- Tez與MapReduce原理與分析

首先看一下MapReduce的工作流程圖 Tez工作流程圖 從上面兩個圖可以看出,Tez可以將多個有依賴的作業轉換爲一個作業(這樣只需寫一次HDFS,且中間節點較少),從而大大提升DAG作業的性能。Tez已被Hortonworks用於Hive引擎的優化,經測試,性能提升約100倍。
相關文章
相關標籤/搜索