Sahi (3) —— 压力测试Load Test以CAS SSO登陆场景为例（103 Tutorial）

Sahi (3) —— 压力测试Load Test以CAS SSO登陆场景为例（103 Tutorial）

jvm版本: 1.8.0_65

sahi版本: Sahi Pro 6.1.0

参考来源:

Sahi官网

Sahi Quick Tutorial

Sahi官方文档：压力测试

Sahi社区论坛：SAHI for performance testing

Sahi (1) —— 快速入门（101 Tutorial）

Sahi (2) —— https/SSL配置（102 Tutorial））

Sahi的压力测试脚本包含了2个子脚本，一个是用来生成压力的，这个脚本被称为“noise”，跑在一个无头（headless）的浏览器上，在“noise”文件中的脚本会一直无限循环执行下去。另一个脚本被称为“subject”，这个脚本是被用来定时执行，然后查看不同压力下的性能指标的。

准备

配置

PhantomJS

由于“noise”是通过PhantomJS在后台运行的，所以我们需要先安装PhantomJS。如果有brew的童鞋可以简单运行下面命令行安装：

brew install phantomjs

写这篇文章的时候PhantomJS的最新稳定版本是2.0.0，但是我们需要较低的1.9.8版本

$ phantomjs --version
2.0.0

原因是Sahi6.1（也是当前最新稳定版）这个版本对于PhantomJS只支持到1.x，如果使用2.0会出现执行时卡死的情况。

• 以下是Mac(Linux)环境下的安装步骤：

  1. 下载PhantomJS到 /usr/local/share

     解压后执行以下命令（1.9以下版本需要）

     sudo ln -s /usr/local/share/phantomjs-1.9.8-macosx/bin/phantomjs /usr/local/share/phantomjs
     sudo ln -s /usr/local/share/phantomjs-1.9.8-macosx/bin/phantomjs /usr/local/bin/phantomjs
     sudo ln -s /usr/local/share/phantomjs-1.9.8-macosx/bin/phantomjs /usr/bin/phantomjs

     完成后可以通过命令行查看当前PhantomJS的版本号

     $ phantomjs --version

  2. 在Dashboard上点击Configure加入以下配置

     <browserType>
       <name>phantomjs</name>
       <displayName>PhantomJS</displayName>
       <icon>phantomjs.png</icon>
       <path>$sahiDir/ext/phantomjs/sahi_phantomjs.sh</path>
       <options>--proxy=localhost:9999 $sahiDir/ext/phantomjs/phantomsahi.js</options>
       <processName>phantomjs</processName>
       <capacity>100</capacity>
       <useSystemProxy>false</useSystemProxy>
     </browserType>

     对于SSL错误，还需要修改配置为（--ignore-ssl-errors=yes）：

     <browserType>
         <name>phantomjs</name>
         <displayName>PhantomJS</displayName>
         <icon>phantomjs.png</icon>
         <path>$sahiDir/ext/phantomjs/sahi_phantomjs.sh</path>
         <options>--ignore-ssl-errors=yes --debug=yes --proxy=localhost:9999 $sahiDir/ext/phantomjs/phantomsahi.js</options>
         <processName>phantomjs</processName>
         <capacity>100</capacity>
         <useSystemProxy>false</useSystemProxy>
     </browserType>              

  3. 保存并重启Sahi

  4. 命令行运行并测试

     $ ./testrunner.sh demo/sahi_demo.sah http://sahitest.com/demo/ phantomjs

     如果成功查看log：

     

压力测试Demo

Sahi6.1官方在安装包下提供了压力测试的示例，我们尝试运行该测试。

首先启动Sahi Dashboard：

$ ./start_dashboard.sh

再运行：

$ ./dload.sh demo/load/noise.sah demo/load/subject.sah http://sahitest.com/demo/training/ firefox

如果完成没有出错Sahi的DLoadRunner会提示成功

查看log与报告

设置ANT

在Sahi的安装目录下 ，新建ant配置文件dload.xml

    <?xml version="1.0" encoding="ISO-8859-1"?>
    <!--
    /**
     * Copyright Tyto Software Pvt. Ltd.
     */
    -->
    <project name="demo" default="dloadrun">
        <taskdef name="sahiload" classname="in.co.sahi.ant.DAntLoadRunner" classpath="lib/ant-sahi.jar"/>

        <target name="dloadrun">
            <sahiload scriptsPathMaster="scripts"
                subject="demo/load/subject.sah"
                baseurl="http://sahitest.com/demo/training/"
                sahihost="localhost"
                sahiport="9999"
                failureproperty="sahi.failed"
                haltonfailure="false"
                browsertype="chrome"
                noise="demo/load/noise.sah"
                noiseBrowserType="phantomjs"
                min="1"
                max="9"
                incrementBy="2"
                interval="5"
                subjectRepeatCount="3"
                ignorePattern=".*(svn|copied).*">
                <node host="localhost" port="9999"/>
                <!--
                <node host="machine2" port="9999"/>
                <node host="machine3" port="9999"/>
                -->
            </sahiload>
            <antcall target="failsahi"/>
        </target>

        <target name="failsahi" if="sahi.failed">
            <fail message="Sahi tests failed!"/>
        </target>
    </project>

然后我们通过命令行运行

ant -f dload.xml

没有安装好ant的也可以通过brew安装

$ brew install ant

    

录制与修改脚本

在录制脚本的时候，不知何原因，无法在通过https访问本地搭建的sso环境https://sso.hoau.com:8433/cas* 同时应用程序客户端https://app1.hoau.com:8413/cas1* 也无法正常访问。比较Sahi里面的浏览器和正常的浏览器证书的设置发现（Firefox-> Preferences -> Advanced -> Certificates -> View Certificates）Sahi里的代理浏览器缺少证书，手工导入无果（没有研究如何操作）

于是尝试先用http录制，然后在PhantomJS后台通过--ignore-ssl-errors=yes模式尝试https

首先录制*http://sso.hoau.com:8083/cas*

_setValue(_textbox("username"), "test01");
_setValue(_password("password"), "psw01");
_click(_submit("登陆"));
_assertExists(_div("msg"));
_assertEqual("Log In Successful You, test01, have successfully logged into the Central Authentication Service. When you are finished, for security reasons, please Log Out and Exit your web browser.", _getText(_div("msg")));

然后更改目标的地址的startURL，并且命令行下运行：

$ ./testrunner.sh my/cas_sso.sah https://sso.hoau.com:8433/cas/ phantomjs

测试成功。

同样方式我们尝试*http://app1.hoau.com:8081*

得到类似脚本：

_setValue(_textbox("username"), "test01");
_setValue(_password("password"), "psw01");
_click(_submit("登陆"));
_assertExists(_link("test01"));

自动化测试

但如果重复playback会出错，因为浏览器会保持JSESSION的session cookie，记录下曾经登陆的状态，无法重复playback。因此，我们需要清除浏览器的cookie。

Sahi官网上介绍了如何清除浏览器cookie，但我尝试过发现此方法无效：

// Shows all cookies for www.yahoo.com domain.
_navigateTo("http://www.yahoo.com/_s_/dyn/Cookies_showAll"); 
// Click the checkbox to choose all cookies.
_check(_checkbox("_sahi_chooseAll")); 
// Delete the cookies.
_click(_button("Delete")); 
// Shows all cookies again so that you can verify that all cookies have been deleted.
_navigateTo("http://www.yahoo.com/_s_/dyn/Cookies_showAll"); 

*怀疑

• 可能是浏览器版本

  我本地的Chrome版本为：42.0.2311.152 (64-bit)
  Firefox版本为：43.0.2

• 可能是路径原因Sahi清除cookie页面里的javascript脚本执行的目标路径有问题

  "_sendToServer(...)"

这个问题还没有研究出根本原因在哪，不过有方法可以绕过去。

我有另外一片文章介绍过CAS SSO的时序图，并且分析过http的request和Response消息头消息体里面的内容，我们可以通过将head Cookie置空达到清除cookie的目的，修改好以后的脚本如下：

_setHttpHeader("Cookie", "");
_navigateTo("https://app2.hoau.com:8423/cas2/"); 


_setValue(_textbox("username"), "test01");
_setValue(_password("password"), "psw01");
_click(_submit("登陆"));  

这样我们就能重复playback，而且经测试发现数据库中也会生成大量ticket

压力测试

以上工作完成后，我们现在正式开始对CAS SSO的登陆做压力测试。

我以官网的样例为模板稍作修改：

<!--
/**
 * Copyright Tyto Software Pvt. Ltd.
 */
-->
<project name="demo" default="dloadrun">
    <taskdef name="sahiload" classname="in.co.sahi.ant.DAntLoadRunner" classpath="../lib/ant-sahi.jar"/>

    <target name="dloadrun">
        <sahiload scriptsPathMaster="scripts"
            subject="my/load/subject.sah"
            baseurl="https://app2.hoau.com:8423/cas2/"
            sahihost="localhost"
            sahiport="9999"
            failureproperty="sahi.failed"
            haltonfailure="false"
            browsertype="chrome"
            noise="my/load/subject.sah"
            noiseBrowserType="phantomjs"
            min="1"
            max="999"
            incrementBy="20"
            interval="5"
            subjectRepeatCount="3"
            ignorePattern=".*(svn|copied).*">
            <node host="localhost" port="9999"/>
            <!--
            <node host="machine2" port="9999"/>
            <node host="machine3" port="9999"/>
            -->
        </sahiload>
        <antcall target="failsahi"/>
    </target>

    <target name="failsahi" if="sahi.failed">
        <fail message="Sahi tests failed!"/>
    </target>
</project>

我们将baseurl指定为测试的目标地址，“subject”浏览器为Chrome，“noise”浏览器为PhantomJS，同时我们将增加线程数的为20，线程从1增长至999最大，为了专注与登陆的压力，我同时将subject和noise都指向了登陆的脚本。有兴趣的童鞋可以尝试以下其他的方式，以及修改参数试试。

可以通过ant运行

$ ant -f dload-sso.xml

然后竟然被我遇到了一个core dev认可，4.1.3版本的major

测试结果：

Github上的答复:

问题

• Sahi的压力测试能否支持部署多个分布式Sahi测试节点？

• Sahi的压力测试除了Subject和Noise这种模式，是否还有需要其他支持，或者提供其他支持？

结束

还未对Sahi做全面评估，网上评论说Sahi比较适合Smoke Web UI，不过单纯从个人角度就易上手程度来主管评价，Sahi相对于Selenium和JMeter较容易上手。