发券分布式任务
2021-10-21 19:41:24 4 举报非常好
作者其他创作
大纲/内容
路由处理0-7表数据
获取分片数字 ...
发券
展示有效数据
1、神策、excel、text
待调研内容1、报表导入、特定会员信息扫描、神策数据处理
分片8
活动保存
6、任务用户信息表
路由到 table_64表数据
9、分片多线程
路由56-63表数据
提交
数据来源
开始
7、分片1
开发内容：1、admin 页面开发2、式任务是否支持分片转移，分片有问题是否能转移到其他分片3、分库分表，导入数据分库，生成优惠券分库分表6、扫描表记录，扫描表增删改查4、活动、模板表增删改查5、优惠券发送接口独立
3、会员信息校验
归档 hbase
分片...
1、数据来源，神策、excel 、txt、开发出excel 导入功能，会员信息2、数据过滤方法、重复数据、3、会员信息校验（非会员，其他校验逻辑）4、活动表有开始执行时间，结束时间7、分片以 2 4 8 16，为益10、建议接口重新写，活着跟正常领券接口独立出来11、活动结束时间、扫的表
获取分片数字 0
数据导入
8\\t_partion_record过滤
mq
路由到table_0表数据
t_partion_record过滤
用户数据
5、模板表
路由到table_1表数据
路由k-k+8表数据
发券接口
默认数据库，不分库活动表保存模板表保存
数据
券落库
2、数据去重
4、任务表
分布式任务（admin）
4库 64张表64 ＊ 200w
会员信息datalink同步过来
锁、一定控制好
获取分片数字 n
1、库表设计 活动表参考营销库，活动表t_manual_activity 模板表 扫描记录表
数据准备
注意事项1、会员信息不能调用会员信息接口，可以接会员dataLink2、锁，活动纬度、表纬度3、
0 条评论
下一页
