在docker容器中使用混沌测试工具chaosblade

一 将chaosblade复制到docker容器内

1.用终端工具连接进入服务所在虚机(我用的是MobaXterm)

2. 上传chaosblade到宿主机

上传混沌测试工具.jpg

3.查看当前应用所在实例的容器ID

命令：docker ps | grep 【实例名称】
该命令可以展示出当前实例下容器的ID，SCBB中一般会自带一个POD容器。另一个才是我们要用到的容器。
实例名称参考SCBB中应用实例列表内的详情
如：docker ps | grep yj-dashboard-56b8b8947b-zgv6x

容器ID.png

4.将工具复制到容器内

命令：docker cp 【/路径/文件名】 【docker容器ID】:【容器内路径】
如：docker cp ./chaosblade-0.8.0-linux-amd64.tar.gz 471139a8f214:/home
进入容器内查看：
命令：docker exec -it 【容器ID】 /bin/bash
如：docker exec -it 471139a8f214 /bin/bash

复制工具到容器内.jpg

5.解压工具：

命令：tar -zxvf 【加密文件】
如：tar -zxvf chaosblade-0.8.0-linux-amd64.tar.gz\

二 chaosblade使用

注意：使用blade命令，需要进入工具文件夹，否则提示找不到命令

2.1 CPU满载：

命令：./blade create cpu fullload
返回：{"code":200,"success","result“：”353213299a3bce82“}
其中 result 的值就是 uid

CPU满载.jpg

查看当前实例的CPU使用情况：CPU被打满
消除故障命令：./blade destroy 【实验uid】
如：./blade destroy 353213299a3bce82

恢复CPU满载.jpg

2.2 提升磁盘读写IO 负载

1.在执行实验之前可先观察磁盘 io 读写负载
命令：iostat -d -t 60
上述命令会 60 秒刷新一次读写负载数据，截取结果如下：（主要观察 kB_read/s、kB_wrtn/s、tps等 数据。）

查看磁盘读写负载.jpg

2.执行磁盘读 IO 负载高场景：
命令：./blade create disk burn --read --path /home
消除故障命令：./blade destroy 【实验uid】

磁盘读IO高负载.jpg

消除读IO高负载.jpg

3.执行磁盘写 IO 负载高场景：
命令：./blade create disk burn --read --path /home
消除故障命令：./blade destroy 【实验uid】

写IO高负债的构造和消除.jpg

【备注】
在容器内也尝试用choasblade构造磁盘高IO的场景，但是失败了，疑似k8s对容器有保护机制。后续再研究一些k8s和docker。

容器内不允许磁盘高IO.jpg

4.模拟磁盘填充
查看当前路径下/home 所在磁盘的大小：df -h /home
按填充大小执行，命令：blade create disk fill --path /【路径】 --size 【填充大小】
如：blade create disk fill --path /home --size 40000

填充磁盘.jpg

执行按百分比填充磁盘，并且保留填充磁盘的文件句柄：
./blade c disk fill --path /home --percent 80 --retain-handle

按百分比填充磁盘.jpg

【备注】
在容器内尝试用choasblade按照容量和百分比填充磁盘，也失败了，疑似k8s对容器有保护机制。

容器内填充磁盘失败.jpg

2.3 内存占用

在执行命令之前，先使用 top 命令查看内存使用信息：

正常内存使用量.jpg

按照百分比占用内存，比如占用80%(在容器内把内存占用到100%，实例会重启，容器重新分配，SCBB中显示重启原因为OOMKilled)
命令：./blade c mem load --mode ram --mem-percent 80

设置百分比占用内存.jpg

2.4网络延迟

先用ifconfig查看当前设备中的网卡；

查看网卡.jpg

设置延时：
访问本机 8080 和 8081 端口延迟 3 秒，延迟时间上下浮动 1 秒
./blade create network delay --time 3000 --offset 1000 --interface eth0 --local-port 8080,8081

设置3s延迟.jpg

文章参考：https://chaosblade-io.gitbook.io/chaosblade-help-zh-cn/blade

工具：

chaosblade：chaosblade-0.8.0-linux-amd64.tar.gz 下载地址：https://github.com/chaosblade-io/chaosblade/releases/

MobaXterm：MobaXterm_Installer_v11.0.zip