离线调度任务系统
2025-03-22 12:30:17 0 举报离线调度任务系统
作者其他创作
大纲/内容
数据处理模块
JSON/CSV
数据解析
worker1
数据清洗
数据接收模块
任务队列（Celery/RQ）
RabbitMQ
消息队列
分布式任务调度（Airflow）
日志框架（Log4J/logging）
结构化
数据库（MySQL）
Kafka
监控与日志模块
大模型服务
数据存储模块
结构化（表格）非结构化（如 JSON 文件）
...
离线调度任务系统
数据转换
模型推理模块
文件系统（本地文件、S3）
监控工具（Prometheus/Grafana）
worker任务队列
批量推理
任务调度模块
收藏
收藏
0 条评论
下一页
