火山引擎 DataTester:“在字节,A/B 实验是一种信仰”

更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,并进入官方交流群

进入数字经济时代,要用数据驱动业务增长已经成为各个行业的共识,但很多企业还没能真正掌握这项能力。如何最大限度转化数据价值,实现决策优化是企业数字化进程中面临的最大难题,字节跳动副总裁杨震原曾在火山引擎开放日中分享了字节是如何解决增长问题的看法:

“数据驱动不是唯数据论,更不是数据至上。我们常说的数据驱动,不是有数据就可以驱动,而是需要对可以量化评估的目标,以 A/B 测试这样的结果数据才能更好地驱动,它代表的是科学决策的理念,不然数据驱动的决策也可能是很糟糕的决策。”

企业在决策优化时首先需要解决两大核心问题,一是要确认目标,这个目标既要层次合理,还需可衡量;二是要有靠谱的评估方法,尽可能去做更为精准的因果关联推断。

从公司层面来看,由于单纯依靠客观指标决策会面临风险,因此战略决策往往是由人来做判断的。但它的问题在于执行层面很容易不一致。战略决策在执行过程中面临很多细节问题的决策,参与的人越多,越容易出现不一致性和有偏性。

如果采用非 A/B 测试的数据分析,关联分析中往往带有偏见,可能会误导决策。而 A/B 测试则是类似于打造一个“平行时空”,把不同策略放进去对比实验,再基于“投石问路”的结果选择更优方案,降低决策风险。

字节跳动在成立之初便开始使用 A/B 测试,为了提升整个 APP 活跃度,从一个交互按钮颜色的变化,或者是一条站外推送的文案,再到内部的运营和公域上的这种营销的策略,甚至是模型算法的优化探索和产品功能迭代,再到整个底层的技术架构的升级,其实都会去做 AB 实验。也因此在字节跳动有一句话叫做“AB 实验是一种信仰,万物皆可试验”。

目前,DataTester 在字节内每日新增 1500+实验,服务于公司 400 多项大大小小的业务,累计已有 150 万次的 A/B 实验进行过。

DataTester 现在已通过火山引擎,开始对外开放给更多企业客户,让更多外部用户可以使用这个增长利器。基于字节跳动的成长理念,以 A/B 测试延伸开来的火山引擎,对外提供的整套的解决方案,中小企业也能借助字节跳动的技术力量拥抱最新的产品趋势,融入字节跳动的各种方法论,打造更加优秀的产品。

点击跳转火山引擎A/B测试DataTester官网了解详情!

你可能感兴趣的:(大数据ab测试)