Plumber_archtect
2016-07-01 16:28:30 0 举报
Plumber工具架构图
作者其他创作
大纲/内容
一段时间任务重跑
JDBC连接
字段口径查询
修复数据项目生成
任务冲突检查
开始
任务依赖
DDB to Hive(Sqoop)
定时执行
元数据管理
RDS
Hive to Oracle
基于sql
任务监控
直接运行
数据源注释编辑
特定指标
DDB
......
业务数据指标监控
异常捕获
Oracle to Hive(Sqoop)
ETL结束
选择项目 设置依赖 创建任务
Hive
transdataETL jar包
一键部署猛犸
基于sql ETL任务
RDS to Hive(Sqoop)
shell脚本方式调用
新建数据源
Oracle
生成猛犸项目代码
基于xml配置文件
Oracle to Oracle
猛犸SLA
数据源管理
数据库持久化
适配执行ETL任务
0 条评论
下一页