模型批量预测方案(文件方式)
2023-02-08 14:00:28 0 举报
模型批量预测方案(文件方式)
作者其他创作
大纲/内容
4、创建并行job领取任务
模型批量预测(文件方式)方案:
middleware
K8s
pip-nfs:只读卷
3、文件分片后、分key存入value为任务状态
holmes-react
Job
VM2
front
job02
PVC
holmes-web-nfs
job0x...
VM3
job01
/data/nfs/.../data/nfs/python包仓库
redis
1、思路上,尽量以k8s的弹性伸缩,提高对机器资源的利用,借此提升批量预测的性能与效率
也可以用数据库做独占锁
VM1
用于容器启动时,pip安装依赖包
2、文件拆分存储
参数可配置:1、任务结束后,自动清理作业容器(v1.23版本stable) 2、重试次数
holmes-web
1、批量预测文件
apps
0 条评论
回复 删除
下一页