流程框架图
2020-11-09 11:42:00 7 举报业务框架流程图
作者其他创作
大纲/内容
KAFKA
业务处理层数据清洗、或数据直接传输到下游
kudu
是否需要，待讨论？
主要问题：kafka数据消费延迟，导致数据累积
PG数据库年度指标（定时计算）
json格式数据
上层业务系统接口查询
pg
数据接入层（oracle）ctos实时数据，日志等
主要问题：1.在kudu中查询1分钟内的所有设备数据，返回速度过慢2.kudu设备表设计不合理3.数据量过大时，接口响应慢
上层业务系统powerbi、美创大屏
redis
kafka
主要问题：实时数据不完整
消费kafka数据
kudu、redis、mysql
5分钟数据校验
数据直接进入（json、xml等格式）
0 条评论
下一页
