数据中台流程示意图
2022-01-26 14:34:18 116 举报
数据中台流程示意图展示了一个从数据采集、存储、处理到应用的完整过程。首先,通过各种渠道和工具收集原始数据,如日志、传感器、用户行为等。接下来,将数据存储在统一的数据仓库中,实现数据的集中管理。然后,对数据进行清洗、转换和整合,以便于后续的分析和挖掘。在这一过程中,可能会涉及到数据湖、数据仓库、数据集市等不同的数据存储和处理技术。最后,将处理好的数据提供给上层应用,支持业务决策和智能分析。整个流程旨在实现数据的高效利用,为企业创造价值。
作者其他创作
大纲/内容
结构化数据
参考数据
数据质量检查
日志
全量采集
招标方式
根据分析视角组合分析主体数据面向业务,面向角色
多维分析
标段编号
内部(主题数据)
数据上报
1001
数据中台(底座、中心)
画像中心
XXX改造
增量采集
数据考核
内湖(数据整合)
标段数量
标段名称
数据脱敏
营商环境主题
合规数据
应用层
数据探查
基于组织统一主数据进行建模管理
使用频次
报表
实时采集
数据开发
和源头数据保持一致没做任何转换保留有限的历史
ETL工具
第三开标室
金融
灵活查询
数据标准
数据注册
文件
数据中台(中心、底座)的核心定位:1、大型解决方案级项目本身需要中台,如深圳、四川等,他们需要中台将数据资源转化为数据资产,最终实现数据变现,数据要素交易2、产品内部本身需要中台进行内控管理,从数据一致性的角度进行数据规划、数据治理,以达到数据价值体现的目的
主体分析主题
数据血缘
接口服务
工程
主数据模型
指标中心
场地
02
开标场地
主要做数据的整合整合主数据整合参考数据核心数据模型
非结构化数据
元数据
外湖(缓存数据)
场地分析主题
分析数据集
采集层
公开招标
算法库
数据异常区(标注标签方式)
数据正常区
入湖前需要明确好质量规则,采集策略
数据挖掘
接口采集
.........
API市场
上报数据集
异常数据
主数据
准入管理
政采
0 条评论
下一页