A/B测试不只是技术工具，正在成为企业构建数据(2)

Forrester 的研究亦表明，洞察力驱动成熟度（Insights-driven maturity）与企业营收增长高度相关，具有较高成熟度的企业营收增长是落后者的5倍，其利用整个公司的洞察力来提高创新能力，增强竞争力。全球领先的企业，通常具备以下三个方面的关键能力：

●深入的客户互动数据洞察：领先企业更多地依靠高级分析、客服机器人和 A/B 测试来决定一个创新应该是什么，而非依靠个人的经验猜测；

●持续改进与创新：借助平台化的数据洞察工具，企业可以快速地将洞察转化为不断提升的客户价值与体验；

●集成式的产品发布管理：产品经理可以使用基于规则的系统来确定何时在生产中激活某些功能并选择向哪些客户发布这些功能，且在产品发布后无缝地实现客户体验升级。

具有较高成熟度的洞察力驱动企业，营收增长是落后者的5倍，来源：《火山引擎A/B测试总体经济影响白皮书》

据此次发布的白皮书指出，以A/B 测试为核心的在线测试（online testing）是目前使用最成熟的数据智能技术之一，是优化和创新数字客户体验的关键。

为了呈现A/B 测试给企业带来的帮助和实际价值，Forrester 还利用总体经济影响（TEI）模型访谈了使用火山引擎A/B 测试产品的客户。

来源：Forrester

结果表明，受访企业实现了广告业务及会员运营营收的增长， 改进了产品优化迭代的效率， 并显著降低了产品发布带来的客户体验下降、客户流失方面的风险。Forrester 还从三个组织中收集数据并创建了虚拟的复合组织，经过整合财务分析，该组织三年共实现人民币520万元的收益，扣除投入成本汇总后，最终获得人民币290 万元的净现值（NPV）以及 126%的 ROI。

来源：Forrester

据悉，整体的访谈前后历经四个月的时间，受访企业不但通过A/B 测试获得可观的量化收益，他们也认知到A/B 测试不只是产品UI的事，而是可以应用在研发运营、客户服务以及营销等领域。Forrester高级咨询顾问谷丰指出，无论是从使用的深度方面还是广度方面，A/B 测试都是企业支撑数据驱动增长、数据驱动运营模式转型很有价值的工具。

A/B测试只是企业转型洞察业务模式的起点

在字节跳动内部，有这么一句话：“A/B测试是一种信仰，风神（数据洞察平台）是一种习惯。” 2014年，当时还是初创公司的字节跳动上线了第一款数据产品Libra，这是字节跳动自研的A/B测试产品，意味着A/B测试在字节内部开始大规模应用。自此，数据驱动的理念完全地根植于字节跳动的基因中。

目前，基于字节跳动内部先进的底层算法、科学分流能力、智能统计引擎，火山引擎A/B测试已覆盖推荐、广告、搜索、UI、产品功能等业务场景，提供从实验设计、实验创建、指标计算和统计分析，到最终评估上线等贯穿整个实验生命周期的服务。

火山引擎A/B 测试实验列表：可以看到各测试的运行状态，来源：火山引擎

郭东东指出，A/B测试虽然是重要的生产力工具，但转型为洞察驱动型组织还需要搭配数据驱动更多的能力。为此，火山引擎基于字节跳动数据驱动的理念，为企业客户提供了一套完整的数据中台，实现从单品数智到全局数智。

据了解，火山引擎的A/B测试工具与数据中台产品是深度打通和联动的。比如 A/B测试产生的数据，可以直接在数据中台建数据仓库。或者把数据仓库里建设好的数据与A/B测试做联动，然后做指标分析。假设做A/B测试时发现指标颗粒度不够，火山引擎数据中台是支持下钻到数据仓库中，进一步分析信息粒度的指标，或者通过BI 工具去分析。“这是上下游深度协同的关系。”郭东东表示，只有在复杂场景下协同起来，才可以更好地解决业务问题。

“一站式的服务还能降低企业的对接成本，并通过数据中台的能力，提供更为全面的服务，比如说数据治理。”

火山引擎数据产品全景图，来源：火山引擎

数据猿了解到，与传统建设数据驱动体系的理念不同，火山引擎数据中台是面向业务价值构建的数据驱动能力，从业务场景出发，根据企业实际应用来驱动中台能力建设，从上往下逐步落地数据驱动能力，为企业客户构建敏捷的数智引擎。

文章来源：《测试技术学报》 网址: http://www.csjsxbzz.cn/zonghexinwen/2022/0502/1570.html