多机多进程并行计算框架
2019-07-04 11:52:50 2 举报
多机多进程并行处理框架设计架构
作者其他创作
大纲/内容
Task
ID-Name-DecReSultParamsProgress-Log
ComputerService
结果汇总
本机存储
MemoryInfo
SQL数据库
计算节点负责处理任务、消息反馈。
序列化
ProcessNode
数据节点负责存储任务数据、任务接收,计算任务调度、消息收集及反馈。
注册
计算资源信息
作业单元
DiskInfo
存储单元
Master
NoSQL数据库
CPUInfo
主节点负责任务创建、分发、结果汇总、计算资源调度。
扩展存储单元
任务、作业单元分发
任务下发
共享存储
收藏
收藏
0 条评论
回复 删除
下一页