首页  思维导图  详情

数据资产管理系统

2020-03-13 18:49:58   3  举报





AI智能生成

企业数据资产管理总体架构与设计

数据资产管理

数据治理

数据安全

数据共享

资产管理

作者其他创作

大纲/内容

2.架构与功能

1.数据标准管理

数据内外部使用和交换一致性和准确性、规范性的约束，数据标准管理则是通过统一的数据标准制定与发布来实现数据平台的完整有效一致与规范。如果数据标准管理做得好的话，将很大程度上能够实现企业内部数据的互联互通，进而推动企业外部数据的共享交换

主要的要素

标准的信息项

要是对标准的特点、性质进行描述

标准的分类

分类维度

基础类数据标准

参考数据、主数据标准、逻辑数据标准、物理数据标准、原数据标准、公共代码和编码标准

指标类的数据标准

应用场景以及业务需求，比如经济指标等，指标类的标准又细分为基础指标以及计算指标。

其它维度

公共代码和编码

公共代码和编码很多企业也会参考国标和行标。如果国标、行标没有的话，企业可以在内部形成完整的数据标准编码体系。与国标或者行标保持一致，将推动数据流通的实现

关键活动

理解数据标准化的需求

结合公司战略与现状，

制定数据标准的体系与规范

制定相应的管理办法以及实施流程要求

建立一些数据标准的管理工具

功能

标准生成

标准映射

标准导出

标注版本管理

2.数据模型管理

主要模型

概念模型

面向用户与客观实践的，其本身与数据库或者数据仓库的架构搭建没有特别多的关系

构建逻辑模型

基于概念模型，面向业务的，用于指导一些数据库系统的实

物理模型

基于逻辑模型，面向计算机物理表示，考虑了操作系统、硬件模型等等，描述数据在存储介质上的结构

关键活动

定义标准化的业务用语/单词/域/编码

根据企业架构设计标准化数据模型

制定数据模型实施流程与稽核要求

功能

数据模型设计

模型差异稽核

模型变更管控

模型可视化

3.元数据管理

描述数据的数据，表的metdata，存储的数据量/大小/数据本身的属性等，通过进行血缘分析和影响分析实现关键信息的记录和跟踪帮助我们了解一些数据的走向，知道数据是从哪里来到哪里去，也可以构建数据地图和数据目录自动提取元数据信息，帮助我们了解这个企业目前拥有什么样的数据资产，将会帮助我们实现关键信息的追踪与记录，快速掌握元数据的变化可能带来的风险。关键驱动力。关键驱动力
数据的元数据管理及关联/映射
数据到元数据到元模型，具体到抽象
元数据本身的数据结构也是需要被定义和规范的，定义和规范元数据的就是元模型，国际上元模型的标准是CWM(Common Warehouse Metamodel，公共仓库元模型)，一个成熟的元数据管理工具，需要支持CWM标准。
元数据管理平台通过多种分析方式帮助企业分析数据流向，具体到字段级的数据解析，如血缘分析、影响分析、关联度分析等，帮助企业获取数据上下游、对象关联对象等等关系，快速定位问题字段，帮助企业降低数据问题的定位难度。

主要模块

技术元数据管理

技术领域相关的，包括数据结构的定义、数据的转换等

业务元数据管理

和业务相关的，包括业务的术语信息的分类、指标、统计口径等

管理元数据

管理领域相关的概念、规则，包括人员的角色、岗位的职责以及管理的流程等

关键活动

开发设计元数据标准

创建/采集/整合元数据

管理元数据存储

元数据分析应用

血缘分析

数据地图

数据地图以数据搜索为基础，提供表使用说明、数据类目、数据血缘、字段血缘等工具，帮助数据表的使用者和拥有者更好地管理数据、协作开发

影响分析

功能

元数据采集

元数据识别

元数据分类

元数据应用

元数据分析应用

血缘分析

依赖关系图

依赖关系图根据节点的依赖关系，展示当前节点的依赖是否为自己预期的情况。如果不是，可以返回调度配置界面重新设置。

内部血缘图

内部血缘图根据节点的代码进行解析根据上述SQL语句，解析出如下内部血缘图。将dw_user_info_all_d作为JOIN拼接ods_log_info_d的输出表解析，展示表之间的血缘关系。

数据地图

数据地图以数据搜索为基础，提供表使用说明、数据类目、数据血缘、字段血缘等工具，帮助数据表的使用者和拥有者更好地管理数据、协作开发

影响分析

https://blog.csdn.net/jiangzhenbo/article/details/85255240

4.主数据管理

主数据管理可以使企业跨系统使用一致的和共享的数据，从而可以降低成本和复杂度，来支撑跨部内、跨系统数据融合的应用。通过对主数据的梳理和管理，将建立数据的一个参考，为数据标准后期的管理节约很多的人力和物力，这个效果也是可以在短期内看到的。对于没有经验开展数据资产管理的企业而言，从主数据管理入手（有的企业也将主数据管理纳入数据标准管理）将会为企业开展数据资产管理带来信心。比如说供应商数据、物料数据、客户数据、员工数据。

关键活动

识别主数据

定义和维护主数据的架构

实现数据库与主数据库的同步

数据集成

采集

清洗

传输

整合

存储

功能

主数据提取整合

主数据清洗校验

主数据变更审批

主数据发布共享

将元数据库数据（采集/检验/清洗/脱敏/补齐）处理形成统一的数据资产，监控起来，提供API服务，通过稽核质态库的数据，维护数据的统一可用

5.数据质量管理

数据质量的管理可以帮助企业获得一些干净以及结构清晰的数据，进而可以提高数据应用和服务的水平。质量要求所带来的成本上升及效益权衡。数据质量是数据应用的前提和基础。

数据质量好坏的衡量指标

完整性

数据是否缺失

规范性

数据是否按要求进行存储/操作

一致性

数据的值是否存在含义冲突及多个主数据不一致

准确性

数据是否错误

唯一性

数据是否重复

时效性

数据是否按时效要求上传

关键活动

定义数据质量要求

定义数据质量测量指标

确定与评估数据质量服务水平

持续测量和监控数据质量

分析产生数据质量问题的根本原因

制定数据质量改善方案

监控数据质量管理操作程序和绩效

功能

质量需求管理

质量稽核规则设置

数据质量任务管理

数据质量报告

元数据质量检核功能，包括一致性检核、属性填充率检核和组合关系检核，是保障元数据质量的重要手段之一。

6.数据安全管理

主要是对数据设定一些安全等级来评估数据的安全风险，来制定或完善数据安全管理相关的技术规范，进行数据安全分级分类。通过对数据进行全生命周期的安全管控，包括数据的生成、存储、使用、共享、销毁等实现事前可管、事中可控、事后可查。

关键活动

理解数据安全需求及监管要求

定义数据安全策略和安全标准

管理数据访问视图与权限

监控用户身份认证和访问行为

定义数据安全强度/划分信息等级

审计数据安全

功能

数据获取安全

数据脱敏/加密

角色授权/统一认证

数据分级分类

数据安全功能针对数据资产管理，提供数据识别、敏感数据发现、数据分类分级、脱敏、访问监控、风险发现预警与审计能力。

数据安全针对用户权限管理，提供可视化申请审批流程，并可进行权限的审计和管理，提高您的数据安全等级，方便您进行数据权限管控。

7.数据价值管理

通过对数据内在价值的度量，从数据的成本和数据的应用价值两个方面来开展，使企业能够最优化、最大化释放数据的价值。数据价值管理分为数据成本管理及数据收益管理两部分，通过维度确定他们的核算指标，监控数据成本的产生或者是监控数据收益的产生，来确定成本的优化或者最大化收益的方案，进而实现数据内部共享、数据外部流通、数据交易以及数据变现

数据成本计量维度

采集/存储/计算成本

运维成本计量

数据质量成本计量

数据价值计量维度

应用场景经济性评估

数据活性评估

数据质量评估

数据成本管理

度量成本维度

确定成本核算指标

监控数据成本产生