dataworks+emr架构
2025-01-02 17:38:54 3 举报dataworks+emr架构
作者其他创作
大纲/内容
统计查询
pg
数据管理
资源目录管理
SQL实时查询与统计查询
集群资源监控
数据上线管理
Hive结构化文件存储
impala实时计算
数据拉取
数据存储
大数据平台
restful接口
mysql
异常告警
flink(cdc)
T+1数据
HDFS/OSS 分布式文件存储
hdd本地磁盘存储
实时查询
Yarn资源调度框架
数据开发+调度+上线
重要数据加密
MapReduce分布式计算
对外提供服务
阿里云datax
集群服务运维
运维管理
阿里云dataworks
存储提供服务(pg/doris/oss)
数据源
Spark内存计算
安全控制
Sqoop数据抽取
三方服务(金蝶、帆软，钉钉，企微，有赞，微信等)
统一用户认证
resuful接口SDK等
实时数据
运维大屏
kafka
集群运维
冒烟测试
帆软/pageplug/nocobase
可视化大屏
查询(dataworks)
doris mpp
平台服务
mongodb
数据质量管理
doris
数据计算
数据同步管理
sqlserver
统一身份管理
角色访问控制
接口
阿里云dataworks+阿里云emr+阿里云CMS告警
收藏
收藏
0 条评论
下一页
为你推荐
查看更多
