大数据架构
2023-11-28 16:59:59 33 举报大数据总体架构
作者其他创作
大纲/内容
数据集市层
自研采集工具（java）
Hive离线数据处理
DWS
企业
实时数据处理
模型系统
YARN
ODS
公共服务
数据应用层
Hive/MR/Spark/UDF
DM
报表系统
监控系统
调度系统Azkaban
消息系统（kafka）
ES（分词搜索）
ETL工具（Flink）
第三方
数据处理层
安全管理
HBase（文件、大文本）
源数据层
爬虫（Python）
资源管理
分布式PG
HDFS
数据采集层
Sqoop
Gitlab/SVN
AI
CDH
CIJenkins
互联网
大屏
数据质量管理
DWD
数据仓库
0 条评论
下一页
