不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了

前言

说到 Redis 相信对于我们这些程序员来说太熟悉了,Redis 凭借着自己超高的超高的性能、完美的文档、简洁易懂的源码和丰富的客户端库支持,很快就在国内的互联网市场占据了一席之地,得到了广大用户的一致好评,随着国内外使用 Redis 的大中小型互联网公司越来越多,可以直接了当的说,现在 Redis 的了解和应用实践是后端中高级程序员必掌握的技能。

如果你是一个后端程序员,对 Redis 还是一知半解,不妨花一段时间看完这篇腾讯大佬手码的《redis 深度笔记》,读完说可以说对掌握 Redis 是肯定不可能的,但可以保证的是,对于你来说肯定收获颇丰。这篇《redis 深度笔记》的内容都是从实战中摸索总结的 Redis 最常用最核心知识点,当你所在公司系统的并发量达到一定的量级,你就会发现这份笔记稀有的高级功能能派上大用场

redis 深度笔记(全彩版)

本小册主要讲解笔者从实战中摸索总结的 Redis 最常用最核心知识点,但限于篇幅和精力,并没有涵盖 Redis 全部的内容知识点,比如 Redis 内置的 lua 脚本引擎就完全没有提到。之所以不讲,是因为在平时的工作中确实从来没有使用过,它就好比关系数据库的存储过程,虽然功能很强大,但是确实很少使用,而且也不易维护,所以就不推荐读者使用了。下面我们就从这基础、应用、原理、集群、拓展、源码等六个篇章来贯通这份 redis 深度笔记吧

Ps:由于篇幅限制,笔记无法全部为大家展示出来,就以截图主要内容的形式让大家参考啦,需要完整版的小伙伴可以添加上小助手 vx: bjmsb15 即可获取到了

PART1:Redis 深度笔记开篇

1.Redis 可以用来做什么?

  • 由 Redis 面试想到的

  • Redis 可以做什么?

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第1张图片

2.Redis 基础数据结构

  • Redis 安装

  • Redis 基础的数据结构

  • 容器型数据结构的通用规则

  • 关于 Redis 使用的一些思考

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第2张图片

PART2:Redis 的应用总结

1.分布式锁

  • 分布式锁

  • 超时问题

  • 可重入性

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第3张图片

2.延时队列

  • 异步消息队列?

  • 队列空了怎么办?

  • 队列延迟

  • 空闲连接自动断开

  • 锁冲突处理

  • 延时队列的实现

  • 进一步优化

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第4张图片

3.位图

  • 基本使用

  • 统计和查找

  • 魔术指令 bitfield

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第5张图片

4.HyperLogLog

  • 使用方法

  • pfadd 这个 pf 是什么意思?

  • pfmerge 适合什么场合用?

  • 注意事项

  • HyperLogLog 实现原理

  • pf 的内存占用为什么是 12k?

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第6张图片

5.布隆过滤器

  • 布隆过滤器是什么?

  • Redis 中的布隆过滤器

  • 布隆过滤器的基本使用

  • 注意事项

  • 布隆过滤器的原理

  • 空间占用估计

  • 实际元素超出时,误判率会怎样变化?

  • 用不上 Redis4.0 怎么办?

  • 布隆过滤器的其他应用

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第7张图片

6.简单限流

  • 如何使用 Redis 来实现简单限流策略?

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第8张图片

7.漏斗限流

  • Redis-Cell

  • 一些思考

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第9张图片

8.GeoHash

  • 用数据库来算附近的人

  • GeoHash 算法

  • Redis 的 Geo 指令基本使用

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第10张图片

9.Scan

  • scan 基础使用

  • 字典的结构

  • scan 遍历顺序

  • 字典扩容

  • 对比扩容缩容前后的遍历顺序

  • 渐进式 rehash

  • 更多的 scan 指令

  • 大 Key 扫描

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第11张图片

PART3:Redis 的原理

1.线程 IO 模型

  • 非阻塞 IO

  • 事件轮询(多路复用)

  • 指令队列

  • 响应队列

  • 定时任务

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第12张图片

2.通信协议

  • RESP(Redis Serialization Protocol)

  • 客户端->服务端

  • 服务端->客户端

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第13张图片

3.持久化

  • 快照原理

  • fork(多进程)

  • AOF 原理

  • AOF 重写

  • fsync

  • 运维

  • Redis4.0 混合持久化

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第14张图片

4.管道

  • Redis 的消息交互

  • 管道压力测试

  • 深入理解管道本质

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第15张图片

5.事务

  • Redis 事务的基本使用

  • 原子性

  • discard(丢弃)

  • 优化

  • Watch

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第16张图片

6.PubSub

  • 消息多播

  • PubSub

  • 模式订阅

  • 消息结构

  • PubSub 缺点

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第17张图片

7.小对象压缩

  • 32bit vs 64bit

  • 小对象压缩存储(ziplist)

  • 内存回收机制

  • 内存分配算法

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第18张图片

8.主从同步

  • CAP 原理

  • 最终一致

  • 主从同步

  • 增量同步

  • 快照同步

  • 增加从节点

  • 无盘复制

  • Wait 指令

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第19张图片

PART4:Redis 集群

1.Sentinel

  • 消息丢失

  • Sentinel 基本使用

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第20张图片

2.Codis

  • Codis 分片原理

  • 不同的 Codis 实例之间槽位关系如何同步?

  • 扩容

  • 自动均衡

  • Codis 的代价

  • Codis 的优点

  • MGET 指令的操作过程

  • 架构变迁

  • Codis 的尴尬

  • Codis 的后台管理

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第21张图片

3.Cluster

  • 槽位定位算法

  • 跳转

  • 迁移

  • 容错

  • 网络抖动

  • 可能下线(PFAIL-Possibly Fail)与确定下线(Fail)

  • Cluster 基本使用

  • 槽位迁移感知

  • 集群变更感知

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第22张图片

PART5:Redis 拓展

1.Stream

  • 消息 ID

  • 消息内容

  • 增删改查

  • 独立消费

  • 创建消费组

  • 消费

  • Stream 消息太多怎么办?

  • 消息如果忘记 ACK 会怎样?

  • PEL 如何避免消息丢失?

  • Stream 的高可用

  • 分区 Partition

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第23张图片

http://2.Info 指令

  • Redis 每秒执行多少次指令?

  • Redis 连接了多少客户端?

  • Redisn 内存占用多大?

  • 复制积压缓存区多大?

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第24张图片

3.再谈分布式锁

  • Redlock 算法

  • Redlock 使用场景

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第25张图片

4.过期策略

  • 过期的 key 集合

  • 定时扫描策略

  • 从库的过期策略

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第26张图片

5.LRU

  • LRU 算法

  • 近似 LRU 算法

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第27张图片

6.懒惰删除

  • Redis 为什么要懒惰删除(lazy free)?

  • flush

  • 异步队列

  • AOF Sync 也很慢

  • 更多异步删除点

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第28张图片

7.优雅地使用 Jedis

  • 重试

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第29张图片

8.保护 Redis

  • 指令安全

  • 端口安全

  • Lua 脚本安全

  • SSL 代理

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第30张图片

9.Redis 安全通信

  • spiped 原理

  • spiped 使用入门

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第31张图片

PART6:源码

1.探索字符串内部结构

  • embstr vs raw

  • 扩容策略

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第32张图片

2.探索字典内部

  • dict 内部结构

  • 渐进式 rehash

  • 查找过程

  • hash 函数

  • hash 攻击

  • 扩容条件

  • 缩容条件

  • set 的结构

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第33张图片

3.探索压缩列表内部

  • 增加元素

  • 级联更新

  • IntSet 小整数集合

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第34张图片

4.探索快速列表内部

  • 每个 ziplist 存多少元素?

  • 压缩深度

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第35张图片

5.探索跳跃列表内部结构

  • 基本结构

  • 查找过程

  • 随机层数

  • 插入过程

  • 删除过程

  • 更新过程

  • 如果 score 值都一样呢?

  • 元素排名是怎么算出来的?

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第36张图片

6.探索紧凑列表内部

  • 级联更新

  • 取代 ziplist

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第37张图片

7.探索基数树内部

  • 应用

  • 结构

  • 增删节点

不愧是腾讯架构师珍藏的“redis深度笔记(全彩版)”这细节讲解,神了_第38张图片

最后

不管学习任何一门技术,都应该有个系统的学习!为什么一定要系统性学习?不管你是不是做 IT,其实都有系统性学习的必要。系统性的学习一个知识点,可以让我们在遇到问题时考虑得更加全面,这也是一个成熟的工程师应该具备的特征;碎片化的学习则很容易让我们得出一些片面的、甚至错误的结论。

然而,系统性学习需要耗费巨大的时间和精力,有的人可能会觉得不值得,就放弃了系统性学习,转而信仰复制粘贴改一下七字真言,一头扎进 CURD 的苦海。

你可能感兴趣的:(redis,数据库,java)