ETL架构设计
2019-04-22 10:19:03 4 举报
ETL架构设计是一种用于从源系统中提取数据,转换数据以适应目标系统,然后加载数据到目标系统的技术。它包括三个主要组件:提取(Extract)、转换(Transform)和加载(Load)。提取组件负责从源系统中读取数据,转换组件负责将数据转换为目标系统所需的格式,加载组件负责将转换后的数据写入目标系统。这种架构设计可以帮助企业快速、准确地处理大量数据,提高数据处理效率,为决策提供有力支持。
作者其他创作
大纲/内容
数据装载
DB1
报表展现(FineReport)
DB2
SAP HANA业务系统数据库
DB3
需在FineReport服务器安装MySQL数据库
数据转换
数据抽取
DW
通过FineReport连接数据仓库实现数据的信息化,并将数据转化为可视化图表进行展现。
ETL过程(kettle)
ETL服务器环境需求:服务器配置如下: CPU:八核 内存:16G 存储:300G(装操作系统和数据库)700G(数据库文件) 网卡:百兆网卡操作系统:1.Windows server 2012 64位或以上;) 2.安装kettle,连接HANA需要安装HANA client; 3安装MySQL。(以上环境需要两套,一套测试(测试环境储存至少250G)一套实际使用)
0 条评论
回复 删除
下一页