云测试(Cloud Testing),是基于云计算的一种新型测试方案。服务商提供多种平台,多种浏览器,用户在本地把自动化测试脚本编写好,上传云测试服务网站,然后就可以在网站平台上运行测试脚本。云测试相比开发者自己测试的优点有很多,例如不用购买真机,无需部署运维等。可以在产品测试部分帮助开发者节省大量的资金和时间,使开发者能更聚焦于产品开发本身。
谷歌CEO施密特曾说,在未来的移动互联网中开发者才是主角。所有服务于开发者的平台都是为了让开发者更好的服务于全球用户的,所以服务于开发者的平台都是全球移动互联网生态中不可获取的环节。
Testin云测是一家成立于2011年,是全球最大的真机自动化云测试平台,是国内首个面向开发者的免费应用测试平台。近日,17173产业新闻频道对Testin云测公司CEO王军先生进行了独家专访。
17173:Testin公司对于很多游戏行业还比较陌生,您能不能先给我们介绍一下Testin到底是一家什么样的公司?
王军:我们知道,一个应用程序就像盖房子一样,都是由一行行代码砌起来的,由人码的代码怎么可能没有问题?中间一定会有很多问题。例如,一款软件上一个版本没有问题,最新的版本就出现了闪退等现象。因为很多开发者没有能力和精力对应用程序进行完善的测试。Testin做的工作,广义上说就是帮助开发者建立信心,让开发者把没有问题的产品交付出去。具体的说,Testin是帮助开发者解决对于产品非常重要,但开发者自身又没有能力解决的产品质量问题。
17173:久邦移动互联网研究院副院长金健曾说,“Testin对创业者的意义是帮他们节省大量资金和时间,使开发者能更聚焦产品和服务”。你觉得这个评价准确吗?
王军:我觉得应该说相对于“游戏创业者”来说更为准确。现在的游戏团队很多规模都很小,他们最多编程是自己团队做,把云服务、分发、部署、计费、接入、测试等全部找外包团队。游戏团队更是这样小而精的方式。一些资产重复使用度比较高的,资产成本负载比较轻的(例如编程)的工作可以自己搞,因为程序需要不断修改。另外一些资产重复度不高,而且资产成本比较高的(如:云服务、测试等)的工作外包给专业公司来做比较合适。
17173:2013年的时候,谷歌ceo施密特来中国时说,Testin平台是全球移动互联网生态中不可或缺的环节。我们为什么能够得到施密特先生如此高的评价?
王军:其实施密特说的是Testin公司做的这件事情是全球移动互联网生态中不可或缺的。这句话更为关键是说,未来只有开发者才是移动互联网的主角。所有服务于开发者的平台都是为了让开发者更好的服务于全球用户的,所以这些服务于开发者的平台是全球移动互联网生态中不可获取的环节。开发者真正的强项是开发,应该专注于自己最擅长的程序开发本身。而那些自身不擅长而又不可或缺的工作就交给更专业的公司去做。
之前我说过,Testin成立3年来只做了一件事。Testin的这个定位与谷歌是非常相似的。谷歌拥有全球最大的互联网用户生态系统,但是到现在为止谷歌自己没有做任何一个自己品牌硬件,哪些挂着谷歌LOGO的硬件都是其它公司跟谷歌合作的而已。因为谷歌是一家软件服务平台,它一直专注于做自己最擅长的领域。施密特的意思是,全球互联网生态圈中需要谷歌、Testin这样的专注于自己领域,为开发者服务的公司。
17173:很多人觉得创业应该是年轻人干的,您当时为什么会选择离开PICA公司(掌中无限)去创业?
王军:任何一个创业的出发点,一定是前一件事情没有得到满足,觉得不甘心。在“塞班”手机时代,当时我所在的公司PICA是全球最大的IM平台。在04、05年,当时塞班系统手机用户几乎没有不安装PICA的软件,那时候QQ还没有手机版,只有web版。当时PICA已经能够做到手机对讲、发表情、发图片等,差不多现在微信所做的事情当时我们的PICA基本都已经能够做到了。 但是PICA当时没有坚持做自己的产品,后来主要为中国移动做服务,中国移动的“飞信”等很多产品都是PICA团队开发的。当时我们的产品虽然技术上非常强,但是产品本身并不伟大。我和几个当时都在PICA公司的现在的Testin的创始人当时都觉得很不甘心。
后来创业为什么会选择做Testin这件事呢?其实当时大家觉得我们可能做to C的产品是最擅长的。但是后来大家想我们能不能做一件为to C开发者服务的事情?就像曾经很多美国人去加州淘金,但是最后被人们记住的淘金者有几个?反而Levi’s牛仔裤被人们记住了。当时我们在PICA为中国移动做服务的时候,面临的最大困难就是测试。因为要在每一个终端上反复测试一个程序的稳定性和bug。一个应用程序一旦发布出去,如果存在问题,给开发者或者公司带来的负面影响是不可估量的。正因为这个原因,所以Testin提供的服务就有了生存的基础。
17173:Testin曾经先后拒绝了腾讯、百度、阿里等的投资,最终选择了IDG的990万美元的首轮融资。这是为什么?
王军:我们做这个公司最开始是先自己出钱验证这个方向有没有问题,所以我们初期是由公司的几个创始人一起出资的。后来确实接触过百度、腾讯,再后来也接触过阿里。我们之所以没有选择百度、腾讯、阿里的投资,第一个原因是,一旦你接受了这些公司的投资,就要站队。这就有可能导致你会成为这些公司体制内的一个服务平台,很难服务到广大开发者。第二个原因,做测试服务更讲解第三方和中立。如果你跟某一个公司关系太紧密就很难中立的去评价其它企业的产品好或不好。第三个原因,我和几个创始人都是从UT斯达康出来的,UT斯达康是孙正义在中国投资的最早的一家公司。后来的很多投资公司(例如:软银、IDG等)都是孙正义系的,这其中很多人我们都很熟。IDG原来就是PICA的投资人,我们希望任何一个投资都能够长久一些。出于以上三个原因,所以我们第一笔投资拿的是产业资本,而不是企业资本。
17173:据了解,我们刚刚完成了第二轮融资。我们第二轮融资规模是多大?
王军:在今年年初的时候,我们就考虑在适当的时候启动第二轮融资。有两个原因,第一个是,我们的业务有了大幅度的增长。第二个是,我们关于国际化、开发者服务平台、增值服务等业务现在已经开始筹备。基于以上两个原因,我们肯定是需要资本的帮助。原来我们并没有清晰的融资时间表,但是不断的有投资人找我们,因为大家都认识到了我们在产业中的价值。就像虽然我和谷歌CEO施密特原来就认识,但是施密特在中国认识很多人,为什么施密特没跟其它人一起吃饭、一起见媒体、一起活动?原因是我们Testin距离开发者很近,在行业里有一个不可或缺的位置。
现在这些投资者很希望接触到开发者,就像施密特说的,未来移动互联网的主宰是开发者。我们第二轮融资的额度之前对外公布的是数千万美元,在这里我可以更准确一些的告诉你,具体金额不超过五千万美元,但也绝对不是一两千万美元。
17173:我们第二轮融资的资金将主要投入到什么地方?
王军:第一个方向是我们企业的国际化。随着中国制造的终端在海外的保有量不断增加,例如:印度、越南、印尼、马来西亚、泰国、俄罗斯、巴西、委内瑞拉等。这些国家的移动互联网形态跟几年前的中国非常相似,中国的开发者特别是手游的开发者都希望进入这些国家的市场,但是遇到了很多问题。比如这些国家的终端设备硬件水平比较差,移动网络发展相对落后。这种软硬件的差距给中国的开发者带来很大的困难。举个例子:GO桌面在海外非常成功,其实在中国比GO桌面更好的桌面应用很多。但是其它应用都在走出去的过程中遇到了软硬件的适应问题,所以没有取得成功。
第二个方向是业务的扩张。目前中国的开发者除了手游之外,都面临营收困境。普通应用软件的营收还是一个很大的问题。我们在尝试利用我们的开发者服务平台能够为开发者增加收入。希望通过我们的平台,可以让开发者的产品更加完美,进而取得更好的营收能力。
17173:据了解,Testin去年年底已经达到盈亏平衡,我们的盈利模式是什么?目前的营收规模,以及今年的营收情况如何?
王军:我们的基础测试服务对于任何用户都是免费的,盈利是靠增值服务。因为有的客户需求并不满足于基础测试,他们可能需要更高的测试效率、需要我们提供竞品的比较、需要我们提供一些专家咨询、需要我们帮忙做产品技术调试等等,这些服务会是收费的。打一个比较形象的比喻:一架飞机的头等舱和商务舱是收费的,经济舱完全免费。
我们现在的具体营收数字不方便透露。我们从去年Q4已经做到了营收平衡。今年到目前为止,在我们的团队规模、产品投入快速增长的前提下,收入相应的也在快速增长。我可以非常自信的告诉你,我们公司目前处于一个非常健康的状态。
17173:Testin为什么要进军游戏行业,我们与游戏行业目前或者将来会有哪些交集?
王军:以前我们的测试服务更多的是针对应用软件,游戏只是其中很小的一部分。但是移动游戏行业是发展最快,也是最需要我们这种测试服务的。应用软件开发通常都是完整的团队,设计、编程、测试等都是成体系的。而移动游戏很多团队都非常小,3-5个人就敢开发一款手机游戏,这种小团队开发者就更需要我们的帮助。
另外,我们一直跟游戏引擎公司有密切的合作。例如:Unity开发平台的一部分测试就是我们在做。我们也刚刚完成了和Cocos的底层代码的一些合作,以后所有利用Cocos2dx引擎的开发者,在开发阶段就可以植入我们的测试引擎,帮他们发现开发过程中的问题。任何程序的开发,都是越早发现问题修改起来越容易。
从产业角度来说,游戏虽然竞争非常惨烈,但对于移动开发者的成功路径相对会更短。一款app成与不成可能需要3年时间来验证,而一款手机游戏从开发到最终出结果可能需要1年左右时间就可以,有些手游甚至3,-6个月就可以。由于开发周期短,移动游戏的开发有点像拍电影,一个导演这部电影票房成功了,不代表下一步电影也会热卖。同理,一款手机游戏不成功没关系,大家可以另起炉灶重新来,不代表下一款不成功。所以越来越多的开发者进入到移动游戏领域。
另外,由于游戏行业的高投入产出比,使得很多上市公司为了补充漂亮的盈利报表而高估值收购手游开发公司。周期短和高收购估值使得近年来移动游戏开发团队从几十家一下变成几百上千家。但是移动游戏的淘汰率非常高,要想开发出一款好的游戏越来越困难,所以我们提供的服务就显得越来越有必要了。
17173:移动游戏的测试与app测试的差异大吗?
王军:差异还是非常大的。app测试的重点主要在两个方面:新版本对于移动终端系统的适应性和app自身运行的稳定性。而移动游戏的测试更侧重于能否成功安装、资源包是否过大、内存占用率、与其它程序在运行时是否有冲突、云服务部署是否能承受用户负载、道具交付与支付接口是否正常。这些很多其实都是低级错误,而且解决时间要求非常短。app的测试更多是测试技术问题,而移动游戏测试更多的是与终端的匹配问题。所以,移动游戏的测试会更为复杂,技术难度也更高。
17173:目前Testin有哪些主要游戏厂商客户?我们通常都采取什么合作模式?
王军:我们的游戏客户有三种。第一种是游戏厂商,例如中手游、触控、掌趣等手游上市公司基本都是我们的客户。第二种是移动游戏渠道平台。例如:360、阿里、UC、91、百度等。这些渠道平台在移动游戏产品筛选的时候需要用到我们的服务。第三种是游戏应用商店,目前大部分终端的应用商店的产品,都是经过我们的测试之后才会上架。
17173:王总您在之前接受媒体采访时透露,接下来将引入游戏的用户测试,由真实用户对游戏进行试玩评测。您之前也说过,测试就是完成重复的操作,而人恰恰最不适合完成重复的工作。那游戏引入真人测试具体是一个什么样的模式?
答:这个项目叫做“众测”,测试分为三个层面。第一个层面是专家测试,通过我们的技术专家来帮助开发者解决,例如:程序中的一些函数和堆栈使用对不对、程序响应快慢、音效好坏等技术性问题。第二个层面是用户测试,我们会通过真人去测试游戏的用户体验好不好。第三个层面是调整游戏,我们会有很多产品经理帮助开发者分析游戏存在的问题,并提出修改和调整建议。例如,这款游戏不受欢迎,是不是因为关卡设置太难?我们“众测”平台会有一个针对接受测试任务的专家类似淘宝的评价体系。客户会对专家提供的测试意见进行评价,好评多的专家可以接到更多的测试任务,可以赚到更多的钱。目前这个“众测”平台已经上线了,为客户提供技术测试,用户体验测试,产品改进方案三方面服务。
17173:在移动游戏测试方面,Testin有什么优势?
王军:第一,开发者或者企业没有必要自己组织这么大的一个测试团队和测试体系,这就是我们最大的优势。第二,我们可以通过我们的平台,把很多专家资源和测试资源聚集到一起,为客户提供测试和产品修改意见。这是任何单一团队和企业无法做到的。第三,我们可以帮助中小开发团队对接到大的游戏推广渠道平台。我们都知道,小的游戏开发团队想约到大的渠道发行平台的负责人甚至比约见政府官员还难。现在可以通过我们的平台让产品拿数据说话,相对来说就可以帮助开发者接触和推广自己的产品。其实这些大的移动游戏发行渠道平台也在找我们,希望我们把通过测试的好的产品推荐给他们。有的时候并不是这些大平台门槛高,而是信息不对称。
17173:在与游戏厂商合作或谈判过程中,Testin都遇到了哪些困难?最大的困难是什么?
王军:应该说困难是相当多的。从安卓和IOS开始,移动互联网发展到今天5年多不到6年的时间。手游兴起到现在不到3年时间,原来页游和端游的很多用户体验在手游上是不能用的,我们也探寻和发现了一些新的问题。比如,游戏引擎升级了,原有的终端和新的游戏引擎之间会出现矛盾。不同终端CPU尺寸、运行的网络等都有差异。你在一款终端上下载一张全帧的图,与另一款不同终端上下载一副同样的图,显示效果可能是不一样的。你不能忽视任何一款终端的用户体验。移动终端其实没有PC淘汰的快,特别是在欧美市场,一些款式比较老的手机保有量仍然很大。
另外一个我们面临的问题是,游戏的玩法几乎没有重复的,因为游戏是重复的,用户就不玩了。对于我们做测试工作的,就要不断的去体验各种全新的玩法,发现需要改进的地方。这些问题每天都会几十个上百个的出现。每天解决的问题越多,第二天发现的问题就越多。这个问题不断被解决再不断被发现的过程,也是游戏的用户体验也得到提升的过程。
17173:据了解,自2011年成立以来,Testin平台已经对国内80%以上的手游和应用进行过测试,并且通过研究发现手游品质对运营效益有5大关键影响:第一印象、兼容性、稳定性、用户服务体验、互动设计。这5大关键影响的结论是如何得出的?
王军:当人们在温饱之前,想的是吃饱肚子。当吃饱肚子之后,人们就会想我的菜能不能再丰富些。我们用一个贬义词来描述一下目前用户的需求叫“欲壑难填”。你用去年的硬件标准去给用户交付一款今年的游戏产品,用户就会不满意。因为用户接触过的东西越来越多,这就要求你的产品给用户的第一印象是不是够好、是不是有所不同、是不是能够吸引用户,就成了一个很重要的问题。我们自己不能说你必须要用Testin的服务才能开发出更好的产品,但是用了一定比没用效果更为明显。产品交付的速度、品质等都会有明显的提升。
现在的移动端用户获取成本比以前高了很多。一个手游活跃用户的获取成本达到在十几块钱。这不是一个小数字,意味着你丢失一个用户就丢失了十几块钱。每个用户来之不易,大家都希望他们来了就别走。所以必须要避免莫名其妙的软件崩溃迁怒用户导致的用户流失。
我一口气安装了四个打车软件,后来只留下一个,把其它三个都删掉了。作为一个用户,我的评价标准只有一个,那就是注册过程简单不简单。对于用户来说,他们的选择大多数情况都是根据第一印象用户体验去做的。还说我刚才提到的我安装的四款打车软件,在注册的时候都让我收入手机号码,然后接收验证码。有的软件十几秒就能接收到验证码,而有的软件我居然等了九分钟。在接到验证码之前,我已经把这款软件删掉了。这就是用户服务体验。
我们有一个观察,一个游戏从下载到安装到使用,最后用户决定是否继续玩,大概时间在7分钟左右。用户发现一个觉得不错的游戏,在wifi环境不错的条件下,从下载到安装完成大概需要一分多钟的时间。安装完成后开始运行游戏,由于用户时间的碎片化,用户玩会儿游戏可能会看看微信、看看短信、接电话等,然后再返回游戏。如此往复3-4次,大概需要五分多钟。前后加起来一共七分钟。如果在这七分钟时间里这款游戏不能留住用户,那这个用户的流失概率就非常高了。维持用户这段时间的第一印象体验非常重要,这就要求游戏做到不能崩溃,注册验证要简单快捷,安装过程中不能出现错误等。
17173:Testin的核心竞争力是什么?与其它的Testin试平台,我们的优势有哪些?
王军:我们的核心竞争力我认为就是我们这几年来积累的用户。这些用户使用Testin已经成为一种习惯。用户在使用我们服务的同时也给我们提出了很多意见和要求,促使我们的服务越来越好。我可以很负责人的讲,如果现在有一家公司说,我也要做Testin的服务,我做的比Testin更好等等,我觉得这样的话大家听听就是了。就像很多公司曾说过要打败百度,但是真正没有人可以做到。Testin做了三年,我敢说即使有人把Testin所有的人,甚至包括我自己都挖走了,Testin一定还是业界第一。因为你挖走的人带走的只是现在的状态,Testin在成长过程中的积累以及与客户建立的关系是带不走的。
其实技术永远是最廉价的,很难成为核心竞争力,用户的刚性需求才是最重要的。就像360的杀毒软件技术肯定不是最先进的,但是免费的模式是用户的刚性需求。Testin目前已经申请了40多项技术专利,我们一直在对真机测试技术进行潜心的研究。很多驱动都是我们自己独立开发的,例如:在IOS终端上安装应用、在安卓平台安装应用程序的一些底层驱动。还有一些基于图像比对的识别和其它和测试相关的技术我们一直在积累。但是,即使是这样,我们也依然认为技术不是我们的核心竞争力,我们核心还是这么多年用户关系和经验的积累。
17173:Testin未来的发展规划是怎么样的?
王军:任何一个公司在创业过程中所谓的规划其实都是一个想法,企业在发展过程中可能和当初的规划相差十万八千里。我们当初的规划和现在所做的事情差别其实也很大。如果说规划,未来我们主要还是专注做好基础的测试服务。另外,可能围绕着开发者的需求,我们还能顺手做一些事情。例如:开发者有很好的产品,但是找不到买家、找不到代理和发行渠道,我们可以利用我们的资源帮助他们。有的公司在中国做的不错,想进军海外市场,我们利用自己的资源可以有机会帮他们走出去。海外开发者想把产品引进中国,我们可以帮助他们解决落地的问题等等。
17173:谢谢王总接受17173的专访。立即体验Testin