mapreduce框架概念和特点

作者: 橘子洲头吃橘子
来源: 51数据库
2020-12-18

MapReduce是一种编程bai模型，用于大du规模数据集zhi（大于1TB）的并行运算。概念dao"Map（映射）"和"Reduce（规专约）"，和他们的主要属思想，都是从函数式编程语言里借来的，还有从矢量编程语言里借来的特性。他极大地方便了编程人员在不会分布式并行编程的情况下，将自己的程序运行在分布式系统上。当前的实现是指定一个Map（映射）函数，用来把一组键值对映射成一组新的键值对，指定并发的Reduce（规约）函数，用来保证所有映射的键值对中的每一个共享相同的键组。
了解更多开源相关，去LUPA社区看看吧

推荐阅读