魔镜调度系统时序图
2020-04-30 15:16:40 0 举报在线数据挖掘系统架构设计
作者其他创作
大纲/内容
执行到此处
循环
数据mojing-data
取第1个节点信息
查看执行状态
服务端webserver
状态：成功 or 失败结果：hive表meta
具体算法信息算法参数等
拓扑ID
主动回报结果
创建拓扑
return
创建调度任务
调度scheduler
重试(回调失败)
用户user
执行拓扑
拓扑topology
构建拓扑图
通知结果(回调)
调启数据计算
1、拓扑与调度集成一个系统，合称调度系统，支持实时调度、定时调度、拓扑依赖调度等功能；2、调度系统与数据相互持有jar包，调度系统持有数据jar，实现数据计算接口和结果查询接口。数据持有调度系统jar，实现结果主动上报功能；3、魔镜webserver不持有任何jar，实现解耦合；
FailStore
node_id or none
检查结果
0 条评论
下一页
