如何高效学习MapReduce技术？

本文共计869个文字，预计阅读时间需要4分钟。

MapReduce参考资料：- https://www.jianshu.com/p/0f83097c0c9e- https://www.jianshu.com/p/9351f2514f75- https://www.jianshu.com/p/5564ee3c885c

MapReduce参考资料www.jianshu.com/p/0f83097c0c9e

www.jianshu.com/p/9351f2514f75

www.jianshu.com/p/5564ee3c885c www.jianshu.com/p/db9210b6a493

www.jianshu.com/p/306745907fa9

---

现在无论前端还是后端都有很多地方提到了MapReduce。

那么什么是mapReduce

MapReduce是一种编程模型,"Map映射“和"Reduce归约”。适用于大数据下分布式并行计算

按照规定完成Map分发数据和Reduce处理数据两部分工作就可以快速得出结果。

想象一个场景

有一个篮球场一样大的果篮里面有苹果、香蕉、葡萄、圣女果等等。现在要统计出来各水果都有多少颗。如果果篮很小的时候一个人就可以处理一个一个数就可以但是篮球场这么大的果篮数据量较大远非一个人就可以处理的。

map - reduce就是为了处理这种问题的一个解决方案。

MapReduce主要分为2个任务: map reduce

Map任务

key/value 对作为输入产生另外一系列 key/value 对作为中间输出写入本地 磁盘。