阿里大数据体系架构图2
2020-07-22 13:42:57 15 举报
阿里大数据体系架构图
作者其他创作
大纲/内容
输出
机器学习PAI
对内
TDDL(分布式)+MYSQL
数据架构&构建方法&工具平台
消息中间件(离线/实时)
数据应用层
离线计算
数据开发平台(D2/SQLSCAN/DQC/在彼岸)DataWorks
实时计算
对平台
(烟囱式开发 -> 5类需求+平台化配置)
MaxCompute
DWS(公共汇总)
输入
(ETL+界面)
DIM(实时维表层)
UserTrack APP 端
数据库同步工具(离线)
服务&工具层数据源
TimeTunnel
数据管理
离线文件同步
AnalyticDB(实时分析数据库)
数据服务层
日志采集技术
对商家
StreamCompute
Aplus.JSweb端
MaxCompute/ODPS
OneData(数据建设体系)Dataphin
数据服务&基础工具层
日志文件
HBase
DataHub实时数据通道
数据计算层
直连同步(规范接口API )
DataX/同步中心
对公众
消息订阅
公共层
QuickBI
OneService
Tunnel批量数据通道
ADS(应用数据)
DWD(公共明细)
数据采集层
(生产者 消费者 )
ODS(操作数据)
收藏
0 条评论
回复 删除
下一页