数据采集流程图
2018-08-20 19:23:00 0 举报
用户画像标签采集流程
作者其他创作
大纲/内容
用户画像标签数据采集
处理数据n
用户基本信息标签
openidappidunionidtag_valuetag_codebiz_datefromopt_typecreated_atupdated_at
保存
数据存储
标签数据采集
用户金融属性标签
行为
swoole采集任务2
标签数据修复
...
运行结果统计记录运行日志
mysql
处理数据2
标签定义
golang采集任务1
业务数据源
1:N 分发
借款
定性标签(规则类)
处理数据1
标签明细
异常邮件报警异常任务自动重跑
读取任务(kafka队列通信)消除语言,平台壁垒
golang采集任务3
monogdb
openidappidunionidtag_1:value_1tag_2:value_2...created_atupdated_at
保单
生产标签数据到kafka
用户购买历史标签
读数据
生成的标签
swoole多进程task任务+redis 进程间数据通信
mongodb
elasticsearch
采集标签数据
golang 接收kafka
配置标签采集任务模块
配置标签采集任务
用户标签
1.统计类标签2.规则类标签3.机械学习挖掘类标签
用户渠道来源标签
用户行为标签
0 条评论
下一页