数极客首页

什么是A/B测试?

什么是A/B测试

什么是a/b测试将Web或App界面或流程的两个或多个版本,在同一时间维度,分别让两个或多个属性或组成成分相同(相似

)的访客群组访问,搜集
各群组的用户体验数据和业务数据,最终
剖析

评价
出最好版本正式采用。中文名:a/b测试 英文名: A/B Testing一、a/b测试的益处

消弭
客户体验(UX)设计中不同意见的纷争,依据

理论

效果肯定
最佳计划

;经过
对比

实验
,找到问题的真正缘由
,进步
产品设计和运营水平

;树立
数据驱动、持续不时
优化的闭环过程;经过
A/B测试,降低新产品或新特性的发布风险,为产品创新提供保证
。二、A/B测试效率在App和Web开发阶段,程序中填加用于制造
A/B版本和采集数据的代码由此惹起
的开发和QA的工作量很大,ROI(return on investment)很低。ab测试的场景遭到
限制,App和Web发布后,无法再增加和更改ab测试场景。额外的A/B测试代码,增加了App和Web后期维护本钱
。因而

,进步
效率是A/B测试范畴
的一个关键问题。三、怎样能高效的实施

A/B测试?在App和Web上线后,经过
可视化编辑器制造
A/B测试版本、设置采集指标,即时发布ab测试版本。AB测试的场景数据量
是无限的;在App和Web发布上线后,依据

理论

状况

,设计AB测试场景,更有针对性,更有效;无需增加额外的AB测试代码,对App和Web的开发、QA和维护的影响最小。四、A/B测试的步骤1.现状剖析

:剖析

业务信息,肯定
当前最关键的改进

点。2.假定
树立
:依据

现状剖析

作出优化改进

的假定
,提出优化倡议

。3.设定目的
:肯定
主要目的
,来权衡
各优化版本的优劣;设置辅助目的
,来评价
优化版本对其他方面的影响。4.界面设计:制造
出2(或多)个优化版本的设计原型;5.技术完成
:Web平台需求
在页面中嵌入数极客JS脚本,然后编辑出各个优化版本。Android和iOS APP需求
添加SDK,然后经过
编辑器制造
各个优化版本。经过
编辑器设置目的
,假定

编辑器不能完成
,则需求
手工编写代码。运用
数极客平台分配流量。初始阶段,优化计划

的流量设置能够

较小,依据

状况

逐步

增加流量。6.采集数据:经过
数极客动采集数据。7.剖析

A/B测试结果:统计显著性抵达

95%或以上并且维持一段时间,且差别

区间正向,实验能够

终了

;假定

在95%以下,则可能需求
延长测试时间;假定

很长时间统计显著性不能抵达

95%致使

90%,则需求
决议
能否
中止实验
。五、A/B测试实施

战略
1.从简单开端
:能够

先在Web前端上开端
实施

。Web前端能够

比较

容易的经过
可视化编辑器制造
多个版本和设置目的
(指标),因而

实施

A/B测试的工作量比较

小,难度比较

低。在Web前端取得

阅历

后,再推行
到App和效劳
器端。2.隔离变量:为了让测试结果有用,应该每个实验
只测一个变量(变化)。假定

一个实验
测试多个变量(比如

价钱
和颜色),就不知道

是哪个变量对改进

起了作用。3.尽可能频繁、快速中止

A/B测试:要降低A/B测试的代价,避免

为了A/B测试做很多代码修正
,尽量将A/B测试与产品的工程发布解耦,尽量不占用太多工程部门(程序员、QA等)的工作量。4.要有一个“中止
开关”:不是每个A/B测试都会得到正向的结果,有些实验
可能失败,要确保有一个“开关”能够

中止
失败的实验
,而不是让工程部门发布一个新版本。5.检查纵向影响:夸大

虚假的CTA(Call To Action)能够

使某个A/B测试的结果正向,但长期来看,客户留存和销售额将会降落
。因而

,时辰
要分明

我们追求的是什么,事前
就要留意
到可能会遭到
负面影响的指标。6.先“特区”再推行
:先在一两个产品上尝试,取得

阅历

后,推行
到其他产品中。六、a/b测试工具国外:Optimizely,Visual Website Optimizer,Omniture等;国内:数极客,ABTester,呼喊
科技等;

数极客是国内首家将用户行为剖析

与A/B测试紧密

分别

,完成
自动化A/B测试的效劳
商。产品咨询:400-808-4002联络
邮箱:buy@shujike.com

发表评论

评论已关闭。

相关文章