金融行业行业云数据湖架构设计图
2021-04-21 16:13:09 0 举报整合金融行业TOP4数据湖核心设计理念与设计经验，结合国内外数据湖lambda、kappa等架构形态设计理念，形成适配金融行业发展的核心架构逻辑形态。在金融领域以及互联网数据湖建设领域有一定的意义。
作者其他创作
大纲/内容
HDFS原始资料区
12
数据集成（集成）
明细层
数据服务
MPP
访问层
对象存储
01
HDFS登录区
SA区结构化数据[NAS]
HDFS归档区
Redis
11
Mysql
数据湖架构（目标态）
ES
CK
03
实时数据区
Hive
Kafka
HDFS贴源区
汇总层
数据湖
数据集成（交换）
01 源系统-->NAS-->HDFS03 核验后文件保存至 登录区04 将登录区数据与hive已有存量数据根据常用算法（拉链/切片）进行整合05
MPP登录层
Hbase
MPP贴源层
非结构化数据[NAS]
流式数据
04
云数仓
![[※]数据湖功能架构](https://www.processon.com/chart_image/template/thumb/657eaf769a873e50f506e2b7.png?tid=607ce17a1e08534f372ac63a)
0 条评论
下一页
