MapReduce實現數據清洗（去重）

上面是數據的格式java 特徵碼#路徑（路徑裏面包括身份證號和姓名），我經過身份證號進行去重。node Map程序apache public static class DistinctMaper extends Mapper<LongWritable, Text, Text, PeopleBean>{ @Override protected void map(LongWritable key, T

>>阅读原文<<