大数据建设要求
2022-11-09 19:39:50 2 举报AI智能生成
大数据职场必备技能、大数据建设方法论、发数据建设要求
作者其他创作
大纲/内容
数据服务
查询索检
数据资源情况查询
通用数据查询
通用扩展查询
全文索检
二进制文件查询
获取文件体
音频索检
图片索检
生物特征索检
二次封装
比对订阅
比对订阅
结果查询
中止订阅
模型分析
数据集碰撞类服务
分析类服务
预测类服务
数据推送
数据推送配置
数据封装
数据推送
数据鉴权
数据操作
数据增加
数据删除
数据修改
数据表创建
数据表删除
数据表修改
数据管理
资产管理
服务管理
标签与模型维护
质量与运维管理
数据组织
构成
知识库
资源库
业务库
几个库关系
业务要素索引库
原始库
主题库
功能
数据库创建
数据库管理
数据组织视图
数据接入
数据探查
接入方式探查
环境
来源系统
存储位置
访问要求
提供方式
业务探查
字段探查
空置率
值域及分布
字典情况
取值范围
数据元
类型及格式
命名实体
数据集探查
数据集标准
数据集规模
问题数据探查
数据定义
数据格式定义
原始数据与标准数据元映射
原始字典代码集与规范化字典代码集映射关系
资源目录注册
数据分级分类定义
数据读取策略定义
数据抽取策略定义
结构化半结构化数据抽取策略
非结构化数据抽取策略
来源数据描述
来源数据格式
目的数据描述
抽取策略描述
数据清洗策略定义
数据过滤策略定义
数据资源描述
垃圾数据判断规则
垃圾数据处理动作
数据去重策略定义
数据资源描述
重复数据判定规则
去重时间窗口
重复数据处理动作
数据格转定义
来源描述
目的描述
格转策略描述
数据关联策略定义
关联回填数据描述
关联依赖数据描述
数据关联规则描述
数据比对策略定义
数据资源描述
比对源描述
数据标识策略
数据分发策略定义
数据资源描述
目的数据库描述
数据质量核查规则定义
核查对象描述
质量核查策略描述
质量核查指标描述
数据读取
多通道读取管理要求
工具模块适配
数据读取管理
读取方式管理
消息总线
服务接口
访问数据库
关系型数据库
非关系型数据库
读取文件方式
本地文件
远程文件
源文件写入判定
规则管理
组件化需求
数据读取策略管理
数据读取任务配置
数据读取任务调度
数据读取日志规则管理
数据解压
数据解密
非对称加密算法
对称加密算法
特殊加密算法
记录ID生成
原始库
主记录ID
主键优先读取
必填字段优选读取
时间戳字段优选读取
关键字段优先读取
附件记录ID
其他库
主记录ID
附件记录ID
账单生成
其他转换工作
半结构化数据转换
字符集转换
原始数据存储、备份要求
数据对账
对账的场景
数据接入对账
接入时对账
接入后盘点对账
数据分发对账
1对1分发对账
1对多分发对账
分发盘点对账
对账方法
及时对账
定时对账
盘点对账
内部盘点对账
外部数据包盘点对账
外部数据库盘点对账
对账单
对账单内容
数据提供方对账单
数据接入方账单
数据提供方盘点对账单
数据接入方盘点对账单
对账单使用
对账结果统计
对账结果查询
提供的对账服务
其他技术要求
对账形式
数据指纹
对账协议
对账单存储及交换
对账性能
对账单传递
数据处理
数据提取
结构化数据提取
非结构化数据提取
文本数据提取
要素
关键字和摘要
关系抽取
音频数据提取
声纹
语种
语音转写
音频元数据内容提取
视频图像数据提取
视频图像对象特征提取
视频语言提取
视频字幕文字提取
视频元数据内容提取
图像文字提取
图像元数据内容提取
数据清洗
过滤
去重
格转
校验
空值
取值范围
身份证手机号imei、ip等校验
数值校验
长度校验
精度校验
多字段条件检验
业务规则校验
数据关联
关联回填
人员身份关联回填
车辆物品关联回填
时空关联回填
认证账号关联回填
手机注册信息关联回填
活动场所关联回填
关联提取
要素关联信息提取
要素关系信息提取
关联分析
数据比对
结构化比对
完全匹配
模糊匹配
范围匹配
正则匹配
非结构化比对
关键词比对
文本相似度比对
二进制比对
文件比对
多媒体信息比对
语种比对
图像比对
视频比对
生物特征比对
声纹比对
人脸比对
数据标识
规则解析
规则路由
规则编译
规则执行
数据分发
任务调度服务
分发任务队列
数据分发
分发统计
核账销账
任务监控
数据治理
数据资源目录
数据元管理
资源分类与编目
目录注册与注销
资源目录更新
资源目录同步
资源目录服务
标准落地检查
数据分级分类
血缘关系
模型管理
标签管理
数据质量管理
质量检测数据采集
数据质量检核
问题发现与跟踪
评估要求
功能要求
检测数据采集
数据质量检核
问题发现与跟踪
质量问题发现
实时数据
离线数据
质量问题反馈
质量问题预警
告警规则配置
告警消息推送
质量问题跟踪
实时数据
离线数据
数据质量知识库管理
数据运维管理
0 条评论
下一页
