行业云数据服务架构框图
2021-04-21 15:58:30 0 举报对比阿里云dataworks，腾讯云数据服务，以及华为云数据服务，支持SQL开发； 支持：mysql、oracle、mpp、hbase、hive、ES、influxdb、phoenix、kyligence等9种数据源；支持多源异构数据的跨库查询；支持灵活的缓存机制
作者其他创作
大纲/内容
查询引擎
MPP DB
绿灯测试
注册服务
data-tpl-srv
运行监控
数据网关代理接入
InfluxDB
sql优化
元数据管理
Yarn
Other Storage
SQL模板管理
数据权限
std-sql-engine
调用统计
数据缓冲
...
用户鉴权
订阅管理
注册api
模式查询服务
Tachyon
HA Query Excutor
单源查询
智能调度
负载均衡
SparkThriftServer[8c32g]
基础集群
Test Node
知识图谱
.....
ES
即席查询
Kerberos
数据服务
查询审计
Online Node
数据模型
Single Cluster
订阅授权
Spark 2.3
通用查询服务
Atlas
数据路由
卸载缓存
异步查询
Mysql
任务配置
HBase 2.0
数据服务总线
即席client
物化查询
连接管理
Hive 3.1
数据服务（过渡态）
灰度发布
运行管理
kde其他组件
模板接口定义
HDFS
data-std-srv
多源查询
订阅任务发布
数据订阅服务
data-mgmt
模板配置
加载缓存
Kerbors验证
同步查询
TEZ 0.9
sql解析
数据分析云平台
热度分析
模板查询
模板接口发布
Ambari
Ranger
规则配置
客户行为分析
限流熔断
JDBC查询
Presto
创建应用
SparkThriftServer
业务应用与可视化
接口管理
基础组件
结果归并
MR
智能路由
路由分发
Infrastructure
数据规模
hadoop3.1-hdp3.0
缓存管理
订阅任务查询
queue: queue001，10%
资源管理
身份认证
运营分析监控
![[※]数据湖功能架构](https://www.processon.com/chart_image/template/thumb/657eaf769a873e50f506e2b7.png?tid=607ce17a1e08534f372ac63a)
0 条评论
下一页
