data365使用说明
2021-12-17 16:54:15 3 举报
data365使用说明
作者其他创作
大纲/内容
平台登录
路径:数据开发_程序开发_ETL开发操作:新增ETL任务在未发布ETL里,弄好了点发布,需要审批上线的ETL任务在已发布ETL里,需要配置调度ETL主要处理:hive之间的表的层级流转,不涉及其他系统
路径:元数据_元数据管理_物理表元数据操作:采集成功后的数据会在应用物理表元数据这如新增/变动则需重新采集,如在设计物理表元数据这里则需手动发布源端目标端的数据都要在这里才可以,不然读不到
采集元数据
JDBC驱动
运行数据交换
ETL开发
ETL运行成功后可以配置数据交换把结果表反推到目标库
路径:数据交换_数据交换管理_应用交换操作:新增交换任务在设计交换里,弄好了点发布,需要审批上线后的数据交换在应用交换里,需要配置调度哦主要处理:从业务库采到ods的表,以及从hive推到目标库的表
路径:元数据_元数据采集_采集任务配置操作:新增采集任务,主题和层次自定,然后手动执行成功则罢,失败则看日志,直到任务成功
运行ETL开发
ETL运行后,可以在页面上查看日志也可以在:运维监控_任务调度_任务历史进行查看
路径:控制台_系统初始化_系统资源操作:添加数据库账号信息,需测试+刷新授权操作
配置驱动
系统资源管理
物理表元数据
数据采集到我们的hive的ods表后,我们可以做ETL开发了如失败,可以查看失败的日志
抽取数据
配置数据交换
配置ETL开发
元数据采集
路径:控制台_系统初始化_JDBC驱动操作:添加对应版本的jdbc驱动
0 条评论
下一页
为你推荐
查看更多