MapReduce工作原理
2017-09-28 18:20:44 36 举报
Hadoop2.X版本的MapReduce工作原理
作者其他创作
大纲/内容
NodeManager
ResourceManager
Map Task
3.开启AM进程
Container
5.AM申请资源
7.得到资源后,通过各个节点上的NodeManager启动相应任务
MapReduce框架
分片信息
Client
2.找到一个NodeManger
1.提交Job
Slave3(DataNode)
Slave1(DataNode)
4.得到分片信息
ApplicationMaster
OtherTask
Reduce Task
6.返回AM资源信息
SlaveN(DataNode)
Master
Shuffle
Slave2(DataNode)
·····n个节点·····
收藏
0 条评论
下一页