数仓建设流程图
2021-01-30 00:51:37 0 举报数仓建设流程图
作者其他创作
大纲/内容
spark/flink
kafka
JAVA/PHP日志服务器
用户画像
日志文件
JAVA/PHP应用服务器
分布式文件系统
HDFS
用于hadoop和关系型数据库之间数据导入导出的工具
HIVEODS、DWD、DWS、ADS
web/app前端埋点等
风控系统
OLTP业务数据
分布式的海量日志采集、聚合和传输的系统
sqoop数据导出
MYSQL报表
Mysql应用数据
Nginx
行为数据
队列服务，作为流量消峰
Flume日志sink
数仓
Flume日志采集器
分布式的、面向列的开源数据库
负载均衡
HBASE
高吞吐的分布式的消息系统
数据可视化
业务系统
精准营销
推荐系统
实时分析
web/app业务交互订单、用户、商品等
埋点用户行为数据|用户在产品使用过程中、浏览以及点击埋点。主要产生如页面浏览，点击，停留，评论，点赞，收藏，加购等
0 条评论
下一页
