A/B测试是什么？

A/B测试是为Web或App界面或流程制作两个（A/B）或多个（A/B/n）版本，在同一时间维度，分别让组成成分相同（相似）的访客群组（目标人群）随机的访问这些版本，收集各群组的用户体验数据和业务数据，最后分析、评估出最好版本，正式采用。

| 问题解答

星环科技

0

2条点评

咨询产品

免费试用

解决用户选型困难的好软件，有各维度的信息

客户案例

5

合作品牌

19

A/B测试就是为同一个目标制定两个版本，这两个版本只有某个方面不一样，其他方面保持一致，例如两个版本只有按钮的颜色不一样。

让一部分用户使用A版本（实验组），另一部分用户使用 B版本（对照组）。试运行一段时间后，分别统计两组用户的表现， 然后对两组数据进行对比分析，最后选择效果更好的版本正式发布给全部用户。

| 拓展阅读

A/B测试的实施步骤

1. 现状分析：分析业务数据，确定当前最关键的改进点。

2. 假设建立：根据现状分析作出优化改进的假设，提出优化建议。

3. 设定目标：设置主要目标，用来衡量各优化版本的优劣；设置辅助目标，用来评估优化版本对其他方面的影响。

4. 界面设计：制作2（或多）个优化版本的设计原型。

5. 技术实现：

（1）网站、App(Android/iOS) 、微信小程序和服务器端需要添加各类A/B测试平台提供的SDK代码，然后制作各个优化版本。

（2）Web平台、Android和iOS APP需要添加各类A/B测试平台提供的SDK代码，然后通过编辑器制作各个优化版本。

（3）通过编辑器设置目标，如果编辑器不能实现，则需要手工编写代码。使用各类A/B测试平台分配流量。初始阶段，优化方案的流量设置可以较小，根据情况逐渐增加流量。

6. 采集数据：通过各大平台自身的数据收集系统自动采集数据。

7. 分析A/B测试结果：统计显著性达到95%或以上并且维持一段时间，实验可以结束；如果在95%以下，则可能需要延长测试时间；如果很长时间统计显著性不能达到95%甚至90%，则需要决定是否中止试验。