ab测试

一、了解A/B测试

        A/B测试是一种新兴的网页优化方法，可以用于增加转化率注册率等网页指标。AB测试本质上是个分离式组间实验，以前进行AB测试的技术成本和资源成本相对较高，但现在一系列专业的可视化实验工具的出现，AB测试已越来越成为网站优化常用的方法。

      A/B测试其实是一种“先验”的实验体系，属于预测型结论，与“后验”的归纳性结论差别巨大。A/B测试的目的在于通过科学的实验设计、采样样本代表性、流量分割与小流量测试等方式来获得具有代表性的实验结论，并确信该结论在推广到全部流量可信。

     A/B测试如同GitHub、Docker、APM一样在美国市场已经被各类企业逐渐采用，相信在中国也能被广大开发者所接纳，其测试范围也不仅仅局限于网页优化，目前移动端的A/B测试需要同时支持前端（Web/H5、iOS、Android）及后端（Node.js、PHP、Java），相对于Web端的A/B测试，移动端的技术难度与复杂度都要高得多。

二、步骤

             

1. 打开Apache服务器的安装路径，在bin目录中有一个ab.exe的可执行程序，就是我们要介绍的压力测试工具。

   
   

2. 在Windows系统的命令行下，进入ab.exe程序所在目录，执行ab.exe程序。注意直接双击无法正确运行。（直接拖进cmd运行）

   
   

3. 执行ab命令成功后，可以看到如图提示。该帮助很清楚详细的介绍了ab的用法以及各个参数的含义。

   ab 的用法是：ab [options] [http://]hostname[:port]/path

   例如：ab -n 5000 -c 200 http://localhost/index.php

   上例表示总共访问http://localhost/index.php这个脚本5000次，200并发同时执行。

   ab常用参数的介绍：

   -n ：总共的请求执行数，缺省是1；

   -c： 并发数，缺省是1；

   -t：测试所进行的总时间，秒为单位，缺省50000s

   -p：POST时的数据文件

   -w: 以HTML表的格式输出结果

   
   

4. 执行测试用例：ab -n 1000 -c 100 -w http://localhost/index.php >>c:\1.htm      
   

                                           -n 请求数   -c 并发量    想要测试的网址

三、结果分析

AB测试,200个请求,20个并发.这样的测试强度,CPU占了70-80%,w3p占用了70多M内存,本想多测几次,看看它的内存会不会涨上去,没 有测试机器没办法,开发机要干活.我估计CPU就有问题了,性能有好些个地方还需要优化. 顺便把测试的工具用法作个记号

基本用法:
ab -n 全部请求数 -c 并发数 测试url
例:ab -n 1000 -c 50 http://www.newdev.gztest.com/
Server Software:         Microsoft-IIS/7.0
Server Hostname:        www.newdev.gztest.com
Server Port:            80
Document Path:         
Document Length:        82522 bytes  #请求文档大小

Concurrency Level:      50           #并发数  
Time taken for tests:   92.76140 seconds #全部请 求完成耗时
Complete requests:      10000          #全部请求数
Failed requests:        1974           #失败的请求
  (Connect: 0, Length: 1974, Exceptions: 0)
Write errors:           0
Total transferred:      827019400 bytes   #总传输大小
HTML transferred:       825219400 bytes //整个场 景中的HTML内容传输量
Requests per second:    108.61 [#/sec] (mean)   #每秒请 求数(平均)//大家最关心的指标之一，相当于 LR 中的每秒事务数，后面括 号中的 mean 表示这是一个平均值
Time per request:       460.381 [ms] (mean)   #每次并发请求时间(所有并发) //大家最关心的指标之二，相当于 LR 中的平均事务响应时间， 后面括号中的 mean 表示这是一个平均值
Time per request:       9.208 [ms] (mean, across all concurrent requests)   #每一请求时间(并发平均)  //每个请求实际运行时间的平均值
Transfer rate:          8771.39 [Kbytes/sec] received    #传输速 率//平 均每秒网络上的流量，可以帮助排除是否存在网络流量过大导致响应时间延长的问题
Percentage of the requests served within a certain time (ms)
 

50%    2680
  66%    2806
  75%    2889
  80%    2996
  90%  11064
  95%  20161
  98%  21092
  99%  21417
  100%  21483 (longest request)
//整个场景中所有请求的响应情况。在场景中每个请求都有一个响应时间，其 中50％的用户响应时间小于2680毫秒，60％ 的用户响应时间小于2806毫秒，最大的响应时间小于21417毫秒

由于对于并发请求，cpu实际上并不是同时处理的，而是按照每个 请求获得的时间片逐个轮转处理的，所以基本上第一个Time per request时间约等于第二个Time per request时间乘以并发请求数。

Connection Times (ms)    # 连接时 间
             min  mean[+/-sd] median   max
Connect(# 连接 ):        0    0   2.1      0      46
Processing(# 处理 ):    31  458  94.7    438    1078
Waiting(# 等待 ):       15  437  87.5    422     938
Total:         31  458  94.7    438    1078


其 它参数 :

-n requests     全部请求数
-c concurrency  并发数
-t timelimit    最传等待回应时间
-p postfile     POST数 据文件
-T content-type POST Content-type
-v verbosity    How much troubleshooting info to print
-w              Print out results in HTML tables
-i              Use HEAD instead of GET
-x attributes   String to insert as table attributes
-y attributes   String to insert as tr attributes
-z attributes   String to insert as td or th attributes
-C attribute    加入cookie, eg. 'Apache=1234. (repeatable)
-H attribute    加入http头, eg. 'Accept-Encoding: gzip'
                Inserted after all normal header lines. (repeatable)
-A attribute    http验证,分隔传递用户名及密码
-P attribute    Add Basic Proxy Authentication, the attributes
                are a colon separated username and password.
-X proxy:port   代理服务器
-V              查看ab版本
-k              Use HTTP KeepAlive feature
-d              Do not show percentiles served table.
-S              Do not show confidence estimators and warnings.
-g filename     Output collected data to gnuplot format file.
-e filename     Output CSV file with percentages served
-h              Display usage information (this message)

    四、并发量大，电脑卡，解决办法

          遇到这种情况一般是你开的并行数量太多了。。。例如:ab -c 1000 -n 10000 http://localhost/index.html 如此大的请求就会挂掉，不过还是有补救措施的，可以通过增加并发数上限解决这个问题，步骤如下：

1、停止Apache服务；

2、找到apache/conf/httpd.conf文件,用文本编辑器打开找到这两行：
# Server-pool management (MPM specific)
# Include conf/extra/httpd-mpm.conf
把第二行include........这行的注释去掉。

3、找到apache/conf/extra/httpd-mpm.conf文件,打开，找到：

winnt _module>
ThreadsPerChild 150
MaxRequestsPerChild 0

把上面的150调大，Windows下最大为1920.

注意：尖括号里的名字是winnt，不要看错了

4、重新启动Apache服务.

             （除此之外   还可以进行应用服务器性能优化      存储服务器性能器优化）