有关于Codis的集群部署——基于Linux rhel7.6系统详解
文章目录
-
-
-
- 一、什么是codis？
- 二、codis的特性
- 三、codis的优缺点
- 四、codis的集群部署
-
-
介绍可以参考codis官网
一、什么是codis？
Codis 是一个分布式 Redis 解决方案, 对于上层的应用来说, 连接到 Codis Proxy 和连接原生的 Redis Server 没有明显的区别 (不支持的命令列表), 上层应用可以像使用单机的 Redis 一样使用, Codis 底层会处理请求的转发, 不停机的数据迁移等工作, 所有后边的一切事情, 对于前面的客户端来说是透明的, 可以简单的认为后边连接的是一个内存无限大的 Redis 服务.
Codis是由国内的豌豆荚开源的，主要使用C/C++/golang开发。
Codis 由四部分组成:
-
Codis Proxy (codis-proxy)
codis-proxy 是客户端连接的 Redis 代理服务, codis-proxy 本身实现了 Redis 协议, 表现得和一个原生的 Redis 没什么区别 (就像 Twemproxy), 对于一个业务来说, 可以部署多个 codis-proxy, codis-proxy 本身是无状态的. -
Codis Manager (codis-config)
codis-config 是 Codis 的管理工具, 支持包括, 添加/删除 Redis 节点, 添加/删除 Proxy 节点, 发起数据迁移等操作. codis-config 本身还自带了一个 http server, 会启动一个 dashboard, 用户可以直接在浏览器上观察 Codis 集群的运行状态. -
Codis Redis (codis-server)
codis-server 是 Codis 项目维护的一个 Redis 分支, 基于 2.8.13 开发, 加入了 slot 的支持和原子的数据迁移指令. Codis 上层的 codis-proxy 和 codis-config 只能和这个版本的 Redis 交互才能正常运行. -
ZooKeeper
Codis 依赖 ZooKeeper 来存放数据路由表和 codis-proxy 节点的元信息, codis-config 发起的命令都会通过 ZooKeeper 同步到各个存活的 codis-proxy.
Codis 支持按照 Namespace 区分不同的产品, 拥有不同的 product name 的产品, 各项配置都不会冲突.
- 架构
二、codis的特性
- 自动平衡
- 使用非常简单
- 图形化的面板和管理工具
- 支持绝大多数 Redis 命令，完全兼容twemproxy
- 支持 Redis 原生客户端
- 安全而且透明的数据移植，可根据需要轻松添加和删除节点
- 提供命令行接口
- RESTful APIs
三、codis的优缺点
优点：
开发简单，对应用几乎透明
性能比Twemproxy好
有图形化界面，扩容容易，运维方便
支持在线数据迁移,迁移过程对客户端透明有简单的管理和监控界面
支持高可用,无论是redis数据存储还是代理节点
自动进行数据的均衡分配
最大支持1024个redis实例,存储容量海量
缺点：
代理依旧影响性能(如果codis的proxy只有一个的情况下, redis的性能会下降20%左右)
组件过多，需要很多机器资源
修改了redis代码，导致和官方无法同步，新特性跟进缓慢
开发团队准备主推基于redis改造的reborndb
某些命令不支持,比如事务命令muti
国内开源产品,活跃度相对弱一些
四、codis的集群部署
环境：三台纯净的rhel7.6虚拟机
| 172.25.206.1 | codis1 |
| 172.25.206.2 | codis2 |
| 172.25.206.3 | codis3 |
1、下载安装golang
从下载1.9.1版本下载安装包。
安装
[root@codis1 ~]# tar -C /usr/local -xzf go1.9.1.linux-amd64.tar.gz
[root@codis1 ~]# vim ~/.bash_profile # 在环境变量文件中添加下面这行声明
export GOROOT=/usr/local/go # 安装路径
export GOPATH=/root/gocode # 代码存放路径
export PATH=$PATH:/usr/local/go/bin
[root@codis1 ~]# source ~/.bash_profile
[root@codis1 ~]# go version
go version go1.9.1 linux/amd64
如果环境变量没有配置好就会报如下的警告：
写个 hello world 测试一下：
[root@codis1 ~]# cat test.go
package main
import "fmt"
func main() {
/* 这是我的第一个简单的程序 */
fmt.Println("Hello, World!")
}
[root@codis1 ~]# go run test.go
Hello, World!
2、配置编译环境
/usr/local/go/src是本机所有第三方库 go 项目所在目录，Codis 仅是其中之一
[root@codis1 ~]# mkdir -p /usr/local/go/src/github.com/CodisLabs
下载codis源代码（github上有，直接下载就行）
解压
[root@codis1 ~]# unzip codis-release3.2.zip
Archive: codis-release3.2.zip
de1ad026e329561c22e2a3035fbfe89dc7fef764
creating: codis-release3.2/
inflating: codis-release3.2/.gitignore
安装编译需要的工具
[root@codis1 ~]# yum install -y gcc make g++ gcc-c++ automake openssl-devel zlib-*
3、编译安装
[root@codis1 ~]# mv codis-release3.2 /usr/local/go/src/github.com/CodisLabs/codis
[root@codis1 ~]# cd /usr/local/go/src/github.com/CodisLabs/codis
[root@codis1 codis]# ls
admin deploy extern MIT-LICENSE.txt vendor
ansible doc Godeps pkg version
cmd Dockerfile kubernetes README.md wandoujia_license.txt
config example Makefile scripts
[root@codis1 codis]# make
make的时候如果发生以下报错：缺少模块，按照提示安装即可。
不出现报错就编译成功了！
waring是因为之前的环境变量配置有问题。
[root@codis1 codis]# cd bin/
[root@codis1 bin]# cat version
version = unknown version
compile = 2021-04-12 17:22:06 +0800 by go version go1.9.1 linux/amd64
4、启动
有关各个脚本的启动，在admin文件夹中已经为我们准备好了。
[root@codis1 admin]# ls
codis-dashboard-admin.sh codis-proxy-admin.sh
codis-fe-admin.sh codis-server-admin.sh
启动codis-dashboard
查看日志
启动codis-proxy
启动codis-server
启动codis-fe
查看日志检查有没有问题
5、查看端口（以便待会儿用web图形界面管理集群）
6、图形化管理界面
浏览器访问172.25.206.1:9090
7、通过 fe 添加 group
通过web浏览器访问集群管理页面(fe地址:127.0.0.1:9090) 选择我们刚搭建的集群 codis-demo，在 Proxy 栏可看到我们已经启动的 Proxy， 但是 Group 栏为空，因为我们启动的 codis-server 并未加入到集群 添加 NEW GROUP，NEW GROUP 行输入 1，再点击 NEW GROUP 即可 添加 Codis Server，Add Server 行输入我们刚刚启动的 codis-server 地址，添加到我们刚新建的 Group，然后再点击 Add Server 按钮即可，如下图所示：
8、通过fe初始化slot
新增的集群 slot 状态是 offline，因此我们需要对它进行初始化（将 1024 个 slot 分配到各个 group），而初始化最快的方法可通过 fe 提供的 rebalance all slots 按钮来做，如下图所示，点击此按钮，我们即快速完成了一个集群的搭建。
点击OK之后初始化。
到此就完成了codis的集群化部署，剩下的两台虚拟机同样进行操作就可以实现同样功能。