首页 流程图 详情

数据ETL处理

2021-02-09 11:23:20 29 举报
数据etl
工作流程
作者其他创作
大纲/内容
hadoop HDFS
kafka
elasticseach 索引
是否为脏数据
否
kafka topic 原始 CDN各厂商日志
实时带宽
redis 规则数据及主数据
是
是否为需计算域名
根据各自厂商清洗规则清理脏数据
msyql 规则数据及主数据
msyql 计算规则
kafka(Values topic)
......
kafka(noncal topic)
观看人数
redis计算规则
flink计算集群
Flink计算集群
评论
0 条评论
下一页
为你推荐
查看更多
数据的整理与初步处理
数据的整理与初步处理
ETL相关流程
ETL相关流程
数据处理流程图
数据处理流程图
页面数据处理
页面数据处理
数据流处理
数据流处理
机器学习-数据预处理
机器学习-数据预处理
日志文件处理
日志文件处理
处理[命令+数据]
处理[命令+数据]
处理数据流图
处理数据流图
ETL数据流转图
ETL数据流转图