hive-調優筆記：JVM重用，並行執行、調整reducer個數的用處

一、JVM重用是hadoop調優參數的內容，對hive的性能具備很是大的 影響，特別是對於很難避免小文件的場景或者task特別多的場景，這類場景大多數執行時間都很短。hadoop默認配置是使用派生JVM來執行map和 reduce任務的，這是jvm的啓動過程可能會形成至關大的開銷，尤爲是執行的job包含有成千上萬個task任務的狀況。jvm     JVM重用可使得JVM實例在同一個JOB中從新使

>>阅读原文<<