Kafka的副本数据同步策略即ISR

本文深入解析了Kafka的副本数据同步策略,当所有副本完成同步后才返回ack,确保了数据的一致性和可靠性。同时介绍了ISR(in-sync-replica set)的作用和动态维护机制,以及在leader故障时如何从ISR中选举新的leader,维持系统的稳定运行。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

Kafka的副本数据同步策略是

当副本全部完成同步时,才会返回ack
优点是选举新的leader时,容忍n台节点故障,需要n+1
个副本,而且不会造成数据的大量冗余,缺点是延迟高。
虽然它的网络延迟高,但网络延迟对kafka的影响较小;

ISR:
作用:
剔除故障的follower(不和leader进行同步)
如果leader故障,此时会在follower中选举新的leader

场景:
leader收到数据后,所有follower都开始同步数据,但有某个follower发生故障,迟迟不能与leader进行同步,这时leader会一直等下去,知道它完成同步,才能发送ack,当出现这个场景时

leader维护一个动态的in-sync replica set(ISR),意为和leader保持同步的follower集合。当ISR中的follower完成数据同步之后,就会发送ack。如果follower长时间未向leader同步数据,则该follower将会被踢出ISR,该时间阈值由replica.lag.time.max.ms参数设定,leader发生故障之后,就会从ISR中选举新的leader。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值