mapreduce 分类

作者: 一大口含不住
来源: 51数据库
2020-09-21

只有在客户端提交MapReduce任务的时候才有可能获取本地文件，当MapReduce执行的时候，Map和Redure任务都是分发到不同的节点运行，一般都不是客户端所在的节点，所以没法获取客户端本地文件。但是通过Java IO API应该可以获取Map或者Reduce运行所在节点的本地文件。或者使用Hadoop的DistributedCache将需要使用到的文件缓存在共享存储，以供Map或者Reduce运行时使用

　　不明白啊 = =！

推荐阅读