MapRed程序map個數控制分析

前言：         咱們在線上跑的MapRed程序和Hive程序，Map數到底怎麼控制？這個問題一直比較模糊，此次有機會深刻代碼裏面去看，才瞭解到其實MapReduce針對不一樣輸入格式有不一樣的判斷文件大小的規則以及文件切片和合並的方式。下面就來具體瞭解一下FileInputFormat和CompositeInputFormat兩種主流輸入格式的處理細節。java 首先在這裏提一下MapRe

>>阅读原文<<