YARN工作流程图
2019-05-29 11:26:47 24 举报
Yarn工作流程图
作者其他创作
大纲/内容
NodeManager
11. 发送程序启动脚本
10. 领取到任务,到NodeManager,并创建容器
15
8. 下载job到本地资源
Yarn Child
Reduce task0
1. 申请Application
Faircapacity
Client
11
Container
1
13. Reduce向map获取相应的分区数据
0
15. 程序运行完,MR向RM发送信息注销自己
HDFS
ResourceManager
FIFO调度器
map Task
9. 申请创建map task容器
9
7. 创建容器Container
Reduce task1
cpu+ram
MRApplicationMaster
12. Reduce申请一个容器,用来运行Reduce task程序
13
2. Application返回路径HDFS
5. 将用户的请求初始化为task
14. 运行结果,存储在HDFS系统上
6. 领取到任务 task
3. 提交job运行所需的资源
4. 资源提交完毕,mrAppmaster
0 条评论
下一页