大数据架构
2023-04-22 08:46:14 3 举报
大数据架构
作者其他创作
大纲/内容
各业务文件
计算层
数据应用层
爬虫(Python)
ES(分词搜索)
HDFS
数据分析
数据采集工具
DWD
数据挖掘
YARN
DM
数据统计
数据可视化
各业务平台日志ELK
实时数据处理
分布式PG
ODS
源数据层
消息系统(kafka)
数据仓库
数据集市层
第三方数据API
数据采集层
数据报表
Hive离线数据处理
Sqoop
Hive/MR/Spark/UDF
各业务数据库
ETL工具(Flink)
DWS
HBase(文件、大文本)
0 条评论
下一页