企业大数据平台架构图
2022-06-28 13:29:10 1 举报通用大数据平台技术组件分层架构图
作者其他创作
大纲/内容
kafka
系统监控
RPC封装
日志管理
安装部署
DFSTBDP大数据应用开发平台
客户数据
批处理MapReduceSqoopFlume
Kafka组件接口
运维管理
管理控制台
SQL封装
三方数据
爬虫数据
接口数据
故障管理
Zookeeper
……
结构/半结构数据接口
权限管理
辅助决策
服务层HA封装
应用开发层/微服务架构
交互查询HiveImpalaSparkSQL
Sentry
DFSTBDP大数据应用开发平台SDK
数据采集组件
HDFS组件接口
用户管理
搜索SolrElastic Search
Hue
项目空间管理
数据加载
权限管理接口
用户画像
流计算Spark StreamingStorm
交易数据
数据库管理接口
集群管理
智能报表系统
数据源
服务层管理
线程池封装
HIVE组件接口
设备数据
Oozie
驾驶舱大屏展示
Agent+SDK
flume
HBase组件接口
仓库数据
手工数据录入
Kerberos
业务综合监控
分布式文件系统HDFS
项目空间管理接口
Logstash
DFSTBDP大数据基础平台
实时查询HBaseMongoDBRedis
工具组件
任务调度/查询接口
RestAPI封装
市场数据
分布式资源管理YARN
轻量级组件封装
安全协调
0 条评论
下一页
