MQ---第四篇

系列文章目录


文章目录

  • 系列文章目录
  • 一、Kafka在什么情况下会出现消息丢失及解决方案?
  • 二、Kafka是pull?push?优劣势分析


一、Kafka在什么情况下会出现消息丢失及解决方案?

1)消息发送

1、ack=0,不重试
producer发送消息完,不管结果了,如果发送失败也就丢失了。
2、ack=1,leader crash
producer发送消息完,只等待lead写入成功就返回了,leader crash了,这时follower没来及同步,消
息丢失。
3、unclean.leader.election.enable 配置true
允许选举ISR以外的副本作为leader,会导致数据丢失,默认为false。producer发送异步消息完,只等待
lead写入成功就返回了,leader crash了,这时ISR中没有follower,leader从OSR中选举,因为OSR
中本来落后于Leader造成消息丢失。
解决方案:
1、配置:ack=all / -1,tries > 1,unclean.leader.election.enable : false
producer发送消息完,等待follower同步完再返回,如果异常则重试。副本的数量可能影响吞吐量。
不允许选举ISR以外的副本作为leader。

你可能感兴趣的:(kafka)