大数据架构图
2024-02-25 23:02:22 4 举报大数据数据流程图
作者其他创作
大纲/内容
MySql元数据管理
客户端
日志数据
Flume
缓存服务
db数据
离线数据
etl
impala
大数据交互平台Hue
实时数据
大数据管理工具Ambari
API接口
团队用户：
JDBC
...
zhangsan
数据接入：
MR
数据查询统一服务
个人用户：
实时/批处理
查询引擎：
实时
1. Ambari2. Hive3. Hue4. Ranger
HiveTez
lisi
FreeIPA（Kerberos+LDPA）
数据同步
Yarn
bigdata
Kafka集群
离线查询
计算引擎：
HBase
分布式协调系统Zookeeper
安全管理
Hive
队列：
服务器注册认证服务注册认证用户注册认证
调度Oozie
作业调度Oozie
Flink
web查询
Yarn队列HDFS目录Hive库/表/记录行HbaseKafka
Kylin
flink
HDFS：
Ranger用户权限管理
批处理
Phoenix
Spark
Redis集群
0 条评论
下一页
