请简述MapReduce的计算过程?
请简述MapReduce的计算过程?
正确答案:MapReduce由Map和Reduce两个阶段组成。Map函数以键值对(key,value)作为输入,产生另外一系列键值对作为中间输出写入本地硬盘。MapReduce框架会自动将这些中间数据按照key值进行聚集,将key值相同的数据统一交给()Reduce函数处理。Reduce函数以()key及对应的()value列表作为输入,经合并key相同的()value值后,产生另外一系列键值对作为最终输出写入HDFS。
- 上一篇:增量数据抽取的特点是?
- 下一篇:互联网大数据的定义是?