MapReduce执行流程和Shuffle过程

  • 内容
  • 评论
  • 相关

本节将对 Hadoop MapReduce 的工作机制进行介绍,主要从 MapReduce 的作业执行流程和 Shuffle 过程方面进行阐述。通过加深对 MapReduce 工作机制的了解,可以使程序开发者更合理地使用 MapReduce 解决实际问题。

Hadoop MapReduce作业执行流程

整个 Hadoop MapReduce 的作业执行流程如图 1 所示,共分为 10 步。

Hadoop MapReduce的作业执行流程
图 1  Hadoop MapReduce的作业执行流程

本文标题:MapReduce执行流程和Shuffle过程

本文地址:http://www.hosteonscn.com/5427.html

评论

0条评论

发表评论

邮箱地址不会被公开。 必填项已用*标注