历经30天，13分钟彻底搞懂分布式系统服务注册与发现原理，层层深入

前言

做了 3~5 年编程开发，你已经积累了不少项目经验，扩宽了技术广度，也许已发力成为团队管理者。到了这个阶段，大家却常有这种感受：感觉自己卡在瓶颈进步缓慢，技术水平很难像早期一样实现大幅突破？

其实大家往往忽略了这一点——提升自己的架构认知（工作5年左右程序员必须重视架构认知的提升，这会很大程度上推动你今后的成长）。

架构的本质在于面对业务场景给出优雅的解决方案，使得业务能够快速迭代和持续交付，从而达到降本增效的目标。

提升架构认知高度，就像达克效应所描述的一样，要敢于从愚昧之巅跳到绝望之谷，通过爬升开悟之坡，从而达到架构认知的巅峰时刻。

那么，如何学习Kafka源码？？

我觉得最高效的方式就是去读最核心的源码，先看一张 Kafka结构图 以及 Kafka 源码全景图

梳理一下关于 Kafka 框架，找到学习的重点。

其次，我要说的就是一个Kafka源码解析的文档——《Kafka源码解析与实战》

前5章分别是：Kafka简介、Kafka的架构、Broker概述、Broker的基本模块、Broker的控制管理模块

• **第1章 Kafka简介：**介绍Kafka诞生的背景、Kafka在LinkedIn内部的应用、Kafka 的主要设计目标以及为什么使用消息系统

• **第2章 Kafka的架构：**介绍Kafka的基本组成、拓扑结构及其内部的通信协议

• **第3章 Broker概述：**描述Kafka集群组成的基本元素Broker Server的启动以及内部的模块组成

• **第4章 Broker的基本模块：**描述Broker Server内部的九大基本模块: SocketServer 、KafkaRequestHandlerPool 、LogManager、ReplicaManager 、OffsetManager、KafkaScheduler. KafkaApis 、KafkaHalthcheck和TopicConfigManager

• **第5章 Broker的控制管理模块：**介绍BrokerServer的控制管理模块KafkaController,这个模块负责整个Kafka集群的管理，例如:Topic的新建和删除.分区状态和副本状态的转换、集群的负载均衡管理等

后5章分别是 Topic的管理工具、生产者、消费者、Kafka的典型应用、Kafka的综合案例

• **第6章 Topic的管理工具 ：**介绍三个维护脚本: kafka-topics.sh 、kafka-reassign-partitions.sh 和kafka preferredreplica-election.sh,它们分别涉及Topic的生命周期管理、Topic分区的重分配和分区首选副本的选择。

• **第7章 生产者 ：**从设计原则、示例代码、模块组成和发送模式四个部分介绍有关消息生产者的相关知识，从设计原则至客户端编程，从客户端编程到内部实现原理，由浅人深，循序渐进地讲解。

• **第8章 消费者 ：**分别介绍两种消费者:简单消费者和高级消费者。针对每种消费者都将依次从设计原则、消费者流程、示例代码以及原理解析四个部分介绍消费者的相关知识。

• **第9章 Kafka的典型应用 ：**介绍Kafka与典型大数据系统的集成，包括: Kafka和Storm的集成、Kafka 和ELK的集成、Kafka和Hadoop的集成以及Kafka和Spark的集成。

• **第10章 Kafka的综合案例 ：**用综合实例描述了Kafka的应用，案例描述Kafka作为数据总线在安防整体解决方案中的作用，通过车辆人脸图片数据的入库、视频数据的入库、数据延时的监控、数据质量的监控、布控统计和容灾备份6个业务，简要阐述内部的实现原理。

再者就是关于Kafka的面试

Kafka面试专题解析

1. Kafka 的设计时什么样的呢？

2. 数据传输的事物定义有哪三种？

3. Kafka 判断一个节点是否还活着有那两个条件？

4. producer 是否直接将数据发送到 broker 的 leader(主节点)？

5. Kafa consumer 是否可以消费指定分区消息？

6. Kafka 消息是采用 Pull 模式，还是 Push 模式？

7. Kafka 存储在硬盘上的消息格式是什么？

8. Kafka 高效文件存储设计特点

9. Kafka 与传统消息系统之间有三个关键区别

10. Kafka 创建 Topic 时如何将分区放置到不同的 Broker 中

11. Kafka 新建的分区会在哪个目录下创建

12. partition 的数据如何保存到硬盘

13. kafka 的 ack 机制

14. Kafka 的消费者如何消费数据

15. 消费者负载均衡策略

16. 数据有序

17. kafaka 生产数据时数据的分组策略

复习学习必备44个Kafka知识点（基础+进阶+高级）

Kafka基础篇知识点（17）

Kafka进阶篇知识点（15）

Kafka高级篇知识点（12）

44个Kafka知识点（基础+进阶+高级）解析如下

总目录展示

该笔记共八个节点（由浅入深），分为三大模块。

高性能。 秒杀涉及大量的并发读和并发写，因此支持高并发访问这点非常关键。该笔记将从设计数据的动静分离方案、热点的发现与隔离、请求的削峰与分层过滤、服务端的极致优化这4个方面重点介绍。

一致性。 秒杀中商品减库存的实现方式同样关键。可想而知，有限数量的商品在同一时刻被很多倍的请求同时来减库存，减库存又分为“拍下减库存”“付款减库存”以及预扣等几种，在大并发更新的过程中都要保证数据的准确性，其难度可想而知。因此，将用一个节点来专门讲解如何设计秒杀减库存方案。

高可用。 虽然介绍了很多极致的优化思路，但现实中总难免出现一些我们考虑不到的情况，所以要保证系统的高可用和正确性，还要设计一个PlanB来兜底，以便在最坏情况发生时仍然能够从容应对。笔记的最后，将带你思考可以从哪些环节来设计兜底方案。

---

篇幅有限，无法一个模块一个模块详细的展示（这些要点都收集在了这份《高并发秒杀顶级教程》里），觉得有需要的码友们，麻烦各位转发一下（可以帮助更多的人看到哟！）点这里，即可获得免费下载的方式！！

由于内容太多，这里只截取部分的内容。需要这份《高并发秒杀顶级教程》的小伙伴，麻烦各位帮忙点赞分享支持一下（可以帮助更多的人看到哟！）
aZ0ZNZ-1618624197004)]

[外链图片转存中…(img-BzmqU1Jn-1618624197005)]

由于内容太多，这里只截取部分的内容。需要这份《高并发秒杀顶级教程》的小伙伴，麻烦各位帮忙点赞分享支持一下（可以帮助更多的人看到哟！）