kafka框架
2022-05-13 12:26:43 1 举报简单的kafka框架图
作者其他创作
大纲/内容
TopicApartition 1（Follower）
broker-2
consumer group1
用户空间
kafka cluster
consumer1
消息丢失问题：1、生产者丢失消息1）回调通知的api2、消费端丢失消息1）手动提交位移重复消费的问题1、提高单条消息的处理速度2、生成消息时候加入唯一标识符消息顺序问题1 指定为同一个partition顺序读写零拷贝 sendfile批量发送 读取分区机制数据压缩
TopicApartition 0（Follower）
consumer group2
broker-1
数据
TopicBpartition 0（Follower）
TopicBpartition 0（Leader）
TopicApartition 0（leader）
producer1
内核缓冲区
应用程序
zookeeper
producer0
broker-3
拷贝
consumer0
TopicApartition 1（Leader）
Producer
0 条评论
下一页
