有关MapReduce的学习一

发布时间 2023-08-13 21:54:36作者: yesyes1

1、MapReduce思想

主要分为两个阶段:

图像表示为:

2、MapReduce的设计构思

构建抽象编程模型:

统一架构、隐藏底层细节:

3、MapReduce介绍、阶段划分与进程组成

分布式计算:

框架:

MapReduce特点:
易于编程--良好的扩展性--高容错性--适合海量数据的离线处理

MapReduce局限性:
实时计算性能差--不能进行流式计算

实例进程:

阶段组成: