ACKS(确认收到)的参数配置,幂等性

ACKS参数配置:

0:producer不等待broker的ack(是topic的每个partition发送),这一操作提供了最低的延迟,broker一接收到还没有写入到磁盘就已经返回(反正就是不等待ack),当broker故障时可能会丢失数据

1:producer等待broker的ack,partition的leader落盘成功后返回ack,如果在follower同步成功之前leader故障,那么将会丢失数据。(就是它会等待leader,不等待follower的同步)

-1(all):producer等待broker的ack,partition的leader和follower全部落盘成功之后才返回ack。但是如果在follower同步完成之后,broker发送ack之前,leader发生故障,那么会造成数据重复

At least once(至少一次):将服务器的ACK级别设置为-1,可以保证producer到server之间不会丢数据。(可以保证数据不丢失,但是不能保证数据不重复)

At most once 至多一次:将服务器ACK级别设置为0,就可以保证每条消息只会被发送一次。(可以保证数据不重复但不能保证数据不丢失。)

幂等性:指producer无论向server发送多少次重复数据,server端都只会持久化一次。

Exactly Once:数据既不重复也不丢失。比如:交易数据,这种重要数据不能丢失也不能重复。

因此:

At least once + 幂等性 = Exactly Once (精准一次)

你可能感兴趣的:(Kafka,学习)