SVN+Jenkins+Maven+Appium+TestNG+ReportNG 实战 Android 自动化测试

http://testerhome.com/topics/658

言归正传,本文主要是讲述如何使用这些工具来整合流程,实现Android平台的自动化测试.
首先说下背景,因为我测试的东西面向多个国家,对于不同的地域可能有不同的功能,对应不一样的发行渠道,需要测试工具有便捷的case管理功能,能方便地面对不同的发行渠道选择不同的case.而TestNG可以很方便地配置这些,所以选择这个框架.
这里直接使用Appium源码中自带的testng项目示例.位置在源码目录中的

/sample-code/examples/java/testng

1.改造Report的呈现方式
示例Project用Maven来组织项目,所以这里就不改项目架构了,喜欢ant的同学自己去实践吧.
因为示例中用的是TestNG自己生成的测试报告,比较难看,这里用ReportNG来美化一下.
编辑pom.xml,在依赖中添加ReportNG的依赖:

        
            org.uncommons
            reportng
            1.1.4
            test
            
                
                    org.testng
                    testng
                
            
        
        
            com.google.inject
            guice
            3.0
            test
        

ReportNG还得注册一下监听器,这个放在testng.xml中去注册,就不写在POM里了.maven-surefire-plugin插件里配置一个参数,用于接收不同的testng.xml

            
                org.apache.maven.plugins
                maven-surefire-plugin
                2.17
                
                
                    res/${xmlFileName}
                
        
            

pom里面的值留空:

2.使用不同的testng.xml配置文件来配置不同的渠道测试case
在项目根目录建个res文件夹,把testng.xml放进去,testng.xml文件内容如下

version="1.0" encoding="UTF-8"?>
"http://testng.org/testng-1.0.dtd" >
name="Suite"
    verbose="1" >
    <test name="Project_V3023" >
        
            name="com.saucelabs.appium" />
        
    
    
        ="org.uncommons.reportng.HTMLReporter" />
        ="org.uncommons.reportng.JUnitXMLReporter" />
    
    name="false" />

这个文件用来配置选择不同的渠道需要选择的case,res文件夹下可以扔很多testng.xml文件用于不同的渠道.比如A渠道可以用testng1.xml,B渠道可以用testng2.xml,另外在这里面注册一下ReportNG的监听器.
最后修改一下Project的项目文件结构,最后变成这个样子(为了演示方便,只保留了一个测试类):

3.配置Jenkins
勾选参数化构建,创建2个参数
第1个参数是创建一个文件夹,并且返回文件夹路径,这个在后面发邮件要用到.

第2个参数是返回testng.xml的名字,这里因为我只有一个,所以直接返回了,后面这里面可以自己加条件判断是返回哪个testng.xml的名字.比如1\3\5跑testng1.xml,2\4\6跑testng2.xml

用SVN来管理测试代码

构建触发器使用定时触发方式,不截图了.

使用Maven构建项目,并且接收一个参数

构建后运行一下Python的脚本,用途是拷贝文件,将生成的ReportNG报告拷贝到上面由参数1创建的目录下.而这个目录同时也是Apache的网站目录,这样就可以直接通过URL看到测试报告了.

最后用邮件插件发一下邮件,我这里都是引用的系统配置里的内容

收到的邮件是这个样子

点开链接,看到测试报告

最后,总结一下
用SVN管理管理代码,Jenkins做持续集成,项目组织用Maven,测试框架用Appium+TestNG,报告呈现用ReportNG.
好吧,撇去Appium不谈,其他都是大家用来用去的东西了.
现在的问题:
1.Jenkins的触发方式现在是每天晚上定时触发,因为我拿不到源码,开发的编译系统用的也不是Jenkins,我不知道要如何才能更好地使用持续集成.各位小伙伴的持续集成又是怎么做的呢?
2.选择testng.xml不够灵活,不能根据项目特征自动选择对应的testng.xml,比如我想拿渠道号来区分,可Jenkins怎么拿到渠道号?
3.Appium支持多个设备同时运行吗?之前用Robotium时使用Spoon就可以同时在多个设备上运行.

扩展一下:
网易上个月出了一个TestNG的小插件,实现了失败用例重跑,失败自动截图,展示用例运行次数等等功能,很好很实用,就只有一个缺点,生成的报告是改造了TestNG自带的emailable-report.html,实在是太-丑-了~~这个看能不能把功能移植到ReportNG上去.有兴趣的小伙伴可以关注.
项目地址:https://github.com/NetEase/arrow

本帖已被设为精华帖！

喜欢

共收到 12 条回复

lihuazhang 1楼 · 4月前 喜欢

1 我们以前是10分钟，check 一次 ，看有没有人提交代码，有提交就跑一次。一般来说出 build，简单的 bvt 就可以了。如果做验收，一晚一次不为过，你可以做两个 job。一个一直跑迭代，一个做每天的验收。

2 渠道啥意思？ 项目特征自动选择对应的testng.xml 这个可以做到，可以咨询用过的人

3 https://github.com/appium/appium/issues/462 不是很理想

young 2楼 · 4月前 喜欢

谢谢 分享

kevinkong 3楼 · 3月前 喜欢

赞，很详细，对TestNG插件Arrow感兴趣的小伙伴们，欢迎继续扩展

hwwh1410 4楼 · 3月前 喜欢

目前也在时间appium的持续集成。。。求交流

532589730 5楼 · 3月前 喜欢

学习了，考虑使用testng+maven+appium的整合工具

tspring 6楼 · 3月前 喜欢

@summer 麻烦把project发给我，我邮箱是：[email protected]。我对

添加到哪里不确定。我是直接运行testng.xml 但测试报告没有美化。麻烦发给我project，谢谢。

zhouxiaoyagirl 7楼 · 3月前 喜欢

#5楼 @532589730 appium+maven+testng整合工具你那边使用了，怎么用的，我现在卡住，麻烦指导下。

532589730 8楼 · 3月前 喜欢

#7楼 @zhouxiaoyagirl
还没用，主要是卡在java在ios7拖不动元素。

rosepotato 9楼 · 3月前 喜欢

@summer ，你好我正在用appium+maven+testng+jenkins做自动化开发。我现在遇到个问题，我将我的测试放在groups = iosTest中，并创建一个testng.xml, 我在命令行中用调用mvn test -Dtests=testng.xml, 运行总是失败，iPhonesimulator都没起来。但是我用mvn test -Dtest=MyTestClass#myTestMethod 时，测试是成功的。请问你有没有遇到过这个情况，如何解决的。
我的testng.xml 如下：
quot;http://testng.org/testng-1.0.dtd" >

pop.xml 中定义如下：

org.apache.maven.plugins
maven-surefire-plugin

testng.xml




usedefaultlisteners
false


reporter
org.testng.reporters.XMLReporter

zhouxiaoyagirl 10楼 · 3月前 喜欢

#6楼 @tspring 麻烦告知下，appium+maven+testNg是怎样用的，我的运行了之后没有反应。是不是pom中除了添加testNG之外还要添加其他的。