使用goreplay流量回放实践(二)

之前一篇文章写了goreplay的一些基础的介绍以及一些简单的使用，不过都是基于命令行的，由于要操作线上机器，所以存在一定的风险，这边主要介绍结合Jenkins对goreplay做一些简单的封装后，对线上流量做一些转发。

优点：

• 结合Jenkins，界面话操作，更加方便快捷
• 减少在线上机器直接执行命令，降低风险
• 接入grafana监控，结果更加清晰

流程

整体实现的大致流程如下：

• 1. Jenkins新建任务，增加构建必须的参数：如需要转发接口、转发速度、转发到目标机器的IP、转发时间等等。

• 2.用shell脚本，封装goreplay，针对传入的参数，做相应的转发操作

• 3.接入Grafana监控，对转发结果进行有效的监控

Jenkins配置

首先看一下，最终Jenkins的界面如下：

image.png

一共有4个参数：

$name    表示接口名  
$speed   表示转发速度
$server   表示目标机器
$time      表示时间

需要转发的时候，可以自行根据需求，选择某一个接口的流量或者全部接口的流量进行转发，转发速度、时间均可配置。

例如，我们对全部流量，以10%的速度，转发30分钟，看了下监控如下：

image.png

对比可以看到，QPS 约等于线上实时机器的 10%,时间为 30分钟

对Goreplay进行封装

上面有提到 Jenkins 配置的4个参数，封装goreplay主要用到了前三个参数：
根据传入的速度、接口、IP进行相应的操作，封装的代码写的较简单，思路比较重要(隐藏了部分可能涉密的信息，但是不影响整体结构)

function checkspeed(){
    if [ "$speed"x = "100"x ]
    then
        echo 100
    else
        echo $speed
    fi
}


if [ "$name"x = "all"x ]
then
    r=`checkspeed $speed`
    echo $r
    if [ "$r"x = "100"x ]
    then
        echo "原速转发所有流量"
        ./gor --input-raw :xxxx --output-http=$server

    else
        echo "$r""%速度转发所有流量"
        ./gor --input-raw :xxx --output-http="$server|$speed%"
    fi

else
    r=`checkspeed $speed`
    echo $r
    if [ "$r"x = "100"x ]
    then
        echo "原速转发" $name
        ./gor --input-raw :xxxx --http-allow-url /$name --output-http=$server

    else
        echo "$r" "$name"
        ./gor --input-raw :xxxxx --http-allow-url /$name  --output-http="$server|$speed%"
    fi
fi

在jenkins配置中，执行该脚本时将三个参数传进去

sh replay.sh  $name $speed $server

接入Grafana监控

转发流量之后，我们需要对目标机器做一个监控以及和线上被转发的机器做一个对比，这边用到了Grafana监控
具体监控哪些指标，可自行根据业务场景，自行增加面板

image.png

image.png

通过这边面板，可以直接的查看一些QPS、耗时等相关信息

以上是最近基于Gorepaly做的一些提效的事情，有好的建议欢迎交流