mapreduce 合并小文件
- 作者: 贝仔
- 来源: 51数据库
- 2020-09-27
1.jpg map会分别解析name1 ip1 tel1 = > key 为name1 value为ip1 tel1name1 age1 address1 = > key 为name1 value为age1 address1reduce输入为name1 name是否相同你不必考虑同一个名字会被记录
1.jpg name为key其他字段为value 就可以了
1.jpg 这种方式不知道在reduce中怎么将这些字段合并在reduce中怎么判断name是否相同,因为一次reduce只可以获取一条记录,无法进行两条记录比较
1.jpg name为key其他字段为value 就可以了
1.jpg 这种方式不知道在reduce中怎么将这些字段合并在reduce中怎么判断name是否相同,因为一次reduce只可以获取一条记录,无法进行两条记录比较
推荐阅读