湖仓一体架构
2023-05-26 16:31:12 3 举报
湖仓一体架构
作者其他创作
大纲/内容
schema演化
对象存储OSS |S3
API 接口
数据源
行级更新
时间旅行
数仓场景BI报表 | 实时分析 | 量测数据分析
统一资产管理
应用场景
半结构化 json | xml | parquet
DATAX(批量同步)
结构化oracle | mysql |mssql
流计算flink
ACID事务
批处理spark
数据集成
湖仓计算
数据湖场景机器学习 | 联邦分析 | 数据探索分析
……
存储层流批统一
湖仓存储管理
非结构化文档 | 音频 | 视频
统一访问层 unified sql
交互式分析presto | starrocks
数据统一存储
分布式块存储HDFS
流式写入(flink-CDC)
文档直传
0 条评论
下一页