在今天召开的火山引擎技术开放日活动中,字节跳动副总裁、算法和数据技术负责人杨震原首次揭秘了字节跳动如何使用A/B测试。火山引擎是字节跳动旗下为企业服务的智能科技品牌,字节跳动的A/B测试工具也已通过火山引擎开放给企业客户。
A/B测试是指对不同策略进行对比实验,根据结果选择最优方案。A/B测试最早应用在医学领域。十八世纪,一位英国医生把患有坏血病的水手随机分成六组,用不同方法进行治疗,从而确定了柠檬和橘子能有效治疗坏血病,这是人类有记载最早的A/B测试。在互联网时代,A/B测试被谷歌等巨头广泛使用在产品开发和运营中。
杨震原介绍,字节跳动每天同时进行的A/B测试达到上万场,单日新增实验数量超过1500个,覆盖400多个大大小小的业务。截至今年3月底,字节跳动累计已经做了70多万次A/B测试。
(字节跳动副总裁杨震原。)
杨震原表示,字节跳动积累的技术能力和增长方法,会通过火山引擎提供给企业客户。火山引擎产品体系包括基础服务、技术中台、智能应用和行业解决方案,字节跳动的视频编辑、特效、文字识别、图像识别、个性化推荐等技术能力,都已在火山引擎上为企业服务。
A/B测试是一款重要的数据产品,能够帮助企业提高决策质量,促进业务增长。以悟空租车为例,该公司已通过火山引擎进行了70多次A/B测试,约有60%为正向实验,提升产品转换率约40%,以往需要一周时间的需求复盘数据分析,现在只要一天就能得到数据结论,极大地提升了效率。
在积极为火山引擎“带货”的同时,杨震原表示A/B测试并不是万能的。企业应充分意识到A/B测试的优势和缺陷,对目标选择适合的评估方法。比如战略性决策,需要专家角色进行长期的思考;很多细节的决策,如果能做A/B测试,要尽量做A/B测试,并且要关注到量化分析的执行能力,真正做到数据驱动科学决策。
(文/小智)
(来源:新湖南客户端)