订单同步流程图
2016-05-07 14:28:48 0 举报
数据传输
作者其他创作
大纲/内容
MongoDB
支付接口将数据写入Redis队列
数据过滤
Flume作为一个缓冲队列,开启1千万的队列大小,队列内容存磁盘。接收到Heka的内容后传给Kafka集群
Kafka集群
对一条数据求md5值,此值作为key存入Redis,相同key表明是重复数据,丢弃该条数据
MySQL
跨机房传输
Heka阻塞读取队列数据,传入Flume
ACK
0 条评论
回复 删除
下一页