数据采集
2020-08-11 14:21:08 7 举报数据采集
作者其他创作
大纲/内容
数据质量
数据采集
任务调度系统
正则
批量数据同步
xpath
数据监控系统
......
精细化运营
Impala
Map Reduce
json
实时流式处理flink/spar streaming
日志
数据储存层
Spark
Hive
数据中台
数据解析层
Spark SQL
Hbase
数据统一接入
离线计算（spark /hive）
自定义漏斗
IOS/Android
系统模块
数据分析层
数据同步系统（数据导入） flume/kafka等
用户画像
PC端
基础数据层
JSON示例：{ \"user_id\
移动/Web
。。。。
留存分析
决策系统
应用层
数据处理层
XML
数据格式
多维查询
数据存储（hdfs）
埋点监控
数据上报
.....
Spark Streaming
0 条评论
下一页
