数据中台架构图
2024-06-01 16:18:59 48 举报airbyte+iceberg+minio+dbt+dagster+openmetadata+postgres+cube
作者其他创作
大纲/内容
airbyte同步数据集市dws+app
BI报表
数仓分层：ods-原始层dwd-明细层dws-服务层app-应用层dws与app组成数据集市
+
数仓
dagster调度器、数据血缘
airbyte同步原始业务系统数据库到数仓ods层
通过trino/dremio sql查询引擎
源系统业务数据...
cube数据开放api+预聚合在缓存
pgsql数据集市
minio存储
iceberg数据湖
数据清洗转换(ELT)、数据资产管理
数据采集
数据应用
OpenMetadata数据资产管理、血缘追溯、数据协作--数据即资产
集团大屏，等前端应用平台......
dbt数据转换
dagsterapi调用采集数据
0 条评论
下一页
