大数据技术架构图
2022-09-22 11:57:13 0 举报大数据数据处理架构图
作者其他创作
大纲/内容
大数据计算平台
数据应用层
web service
MR
... ...
Mirror数据接入层
kettle
前归一
flume
cdc
离 线采集
Oracle
sqlServer
质控
SparkStreaming
Caché
kafka
标化
统计：clickhouse/kylin
ADS数据集市层
NLP
数据仓库
Pig
源数据层
yarn
实时计算
spark
sqoop
Hbase
ODS基础数据层
HDFS/Hadoop
实 时采集
... ...
汇总结果：mysql
离线计算
查询：es ，presto
Hive/Impala
DWT主题层
数 据 治 理
数据质量监控
EMPI/EMOI
任务调度（dolphinscheduler）
Flink
DW数仓层
ogg
Mapping
0 条评论
下一页
