用户登录
用户注册

分享至

mapreduce小文件合并

  • 作者: 请叫我碉碉碉碉堡哥
  • 来源: 51数据库
  • 2020-10-04
1.jpg map会分别解析name1 ip1 tel1 = > key 为name1 value为ip1 tel1name1 age1 address1 = > key 为name1 value为age1 address1reduce输入为name1 name是否相同你不必考虑同一个名字会被记录



  1.jpg name为key其他字段为value 就可以了



  1.jpg 这种方式不知道在reduce中怎么将这些字段合并在reduce中怎么判断name是否相同,因为一次reduce只可以获取一条记录,无法进行两条记录比较
软件
前端设计
程序设计
Java相关