ETL数据流转图
2024-08-30 14:41:41 1 举报
ETL数据流转系统设计
作者其他创作
大纲/内容
数据应用
write
binlog
前置机
maxwell
简单清洗
kafka2
query轮询
给选定表添加落库时间字段
数据采集
kafka1
数据下发权限判断
push
清洗加工过滤
客户侧数据库
舆情负面消息过滤
数据api
标准化流程
数据存储
中间库
流水账表1
备份库
流水账表3
上游mysql数据库
多种数据处理组件
版权图片过滤
敏感词过滤
pull
流水账表2
内容替换
数据源
数据处理
http请求
缓冲队列
业务2
；落地数据库
数据集市
落地数据库
业务1
下发数据组装
收藏
收藏
0 条评论
回复 删除
下一页
