ZooKeeper 不行了?居然被 Kafka 抛弃了!

点击上方“芋道源码”,选择“设为星标”

管她前浪,还是后浪?

能浪的浪,才是好浪!

每天 8:55 更新文章,每天掉亿点点头发...

源码精品专栏

 
  • 原创 | Java 2020 超神之路,很肝~

  • 中文详细注释的开源项目

  • RPC 框架 Dubbo 源码解析

  • 网络应用框架 Netty 源码解析

  • 消息中间件 RocketMQ 源码解析

  • 数据库中间件 Sharding-JDBC 和 MyCAT 源码解析

  • 作业调度中间件 Elastic-Job 源码解析

  • 分布式事务中间件 TCC-Transaction 源码解析

  • Eureka 和 Hystrix 源码解析

  • Java 并发源码

来源:Java指南者

  • Kafka 2.8 版本

  • KRaft:Kafka 的 Raft

  • 移除 ZooKeeper 的收益

  • 注意事项


ZooKeeper 不行了?居然被 Kafka 抛弃了!_第1张图片 图片

Kafka 2.8 版本

分布式发布与订阅系统Apache Kafka在即将发布的2.8版本,使用Kafka内部的Quorum控制器来取代ZooKeeper。

因此,用户第一次可在完全不需要ZooKeeper的情况下执行Kafka,这不只节省运算资源,并且也使得Kafka效能更好,还可支持规模更大的集群。

过去Apache ZooKeeper是Kafka这类分布式系统的关键,ZooKeeper扮演协调代理的角色,所有代理服务器启动时,都会连接到Zookeeper进行注册。

当代理状态发生变化时,Zookeeper也会储存这些数据,在过去,ZooKeeper是一个强大的工具,但是毕竟ZooKeeper是一个独立的软件,使得Kafka整个系统变得复杂,因此官方决定使用内部Quorum控制器来取代ZooKeeper。

KRaft:Kafka 的 Raft

这项工作从去年4月开始,而现在这项工作取得部分成果,用户将可以在2.8版本,在没有ZooKeeper的情况下执行Kafka,官方称这项功能为Kafka Raft元数据模式(KRaft)。

在KRaft模式,过去由Kafka控制器和ZooKeeper所操作的元数据,将合并到这个新的Quorum控制器,并且在Kafka集群内部执行。

当然,如果使用者有特殊使用情境,Quorum控制器也可以在专用的硬件上执行。

ZooKeeper 不行了?居然被 Kafka 抛弃了!_第2张图片 图片

KRaft协定使用事件驱动机制来追踪整个集群的元数据,过去必须依赖RPC来处理的任务,现在受益于事件驱动以及实际的日志传输,这些改变所带来的好处,便是让Kafka仍够支持更多的分割。

移除 ZooKeeper 的收益

过去Kafka因为带着ZooKeeper,因此被认为拥有笨重的基础设施。

而在移除ZooKeeper之后,Kafka更轻巧更适用于小规模工作负载,轻量级单体程序适合用于边缘以及轻量级硬件解决方案。

注意事项

值得注意的是,在抢先体验版中,有部分像是ACL、安全以及交易等功能都尚未支持,而且在KRaft模式下,也还不支持重新分配分割和JBOD,官方提到,这些功能会在今年稍晚的版本中提供,由于很多功能处于测试阶段,不建议大家将其用于生产环境中。

对了,如果胖友还没入门过 Kafka 的话,可以看看艿艿写的三篇教程:

  • 《芋道 Kafka 极简入门》:http://www.iocoder.cn/Kafka/install/?nb

  • 《芋道 Spring Boot 分布式消息队列 Kafka 入门》:http://www.iocoder.cn/Spring-Boot/Kafka/?nb

  • 《芋道 Spring Cloud 消息队列 Kafka 入门》:http://www.iocoder.cn/Spring-Cloud/Kafka/?nb

  • 《芋道 Spring Cloud 事件总线 Bus Kafka 入门》:http://www.iocoder.cn/Spring-Cloud/Bus-Kafka/?nb



欢迎加入我的知识星球,一起探讨架构,交流源码。加入方式,长按下方二维码噢

ZooKeeper 不行了?居然被 Kafka 抛弃了!_第3张图片

已在知识星球更新源码解析如下:

ZooKeeper 不行了?居然被 Kafka 抛弃了!_第4张图片

ZooKeeper 不行了?居然被 Kafka 抛弃了!_第5张图片

ZooKeeper 不行了?居然被 Kafka 抛弃了!_第6张图片

ZooKeeper 不行了?居然被 Kafka 抛弃了!_第7张图片

最近更新《芋道 SpringBoot 2.X 入门》系列,已经 20 余篇,覆盖了 MyBatis、Redis、MongoDB、ES、分库分表、读写分离、SpringMVC、Webflux、权限、WebSocket、Dubbo、RabbitMQ、RocketMQ、Kafka、性能测试等等内容。

提供近 3W 行代码的 SpringBoot 示例,以及超 4W 行代码的电商微服务项目。

获取方式:点“在看”,关注公众号并回复 666 领取,更多内容陆续奉上。

文章有帮助的话,在看,转发吧。
谢谢支持哟 (*^__^*)

你可能感兴趣的:(中间件,分布式,微软,css,adb)