##A/B测试
###1. 什么是A/B测试
A/B 测试是一种通过数据分析科学优化产品的方法,为同一个优化目标制定两个或多个方案(比如两个不同样式的分享button),随机选择两部分用户,让一部分用户使用 A 方案,另一部分用户使用 B 方案,统计并对比不同方案的点击率、转化率、活跃留存等指标,找到最优的产品决策方案。
###2. 为什么要做A/B测试
####2.1 “后验”成本高
大部分没有A/B测试系统的产品,一般都是头脑风暴出方案、产品上线、数据分析上线效果,如果上线后发现达不到预期效果,只能回滚到之前版本。造成开发成本浪费,产品改版失败严重的会造成客户大量流失。
####2.2 靠“经验主义”去决策
在大部分产品决策中,产品经理会依靠经验直觉去决策,但实际情况是我们想的不一定是用户想的,听用户说什么不如看用户做什么,用户总是说一套,做一套。只有通过严谨的用户行为数据分析,用科学的数据分析指导我们产品决策才是产品增长的核心。业界也一直流传,“再厉害的PM也跑不过一半的A/B测试”。
####2.3 产品优化周期长
一般产品方案都是先上线,上线就要排期,等上线了收集数据再进行分析,如果方案不可行还需要继续排期调整,导致整个产品的更新迭代效率降低。通过数极客的A/B测试不管是PC端、移动端都不需要发版,直接可以快速验证方案的可行性,有效提升产品迭代速度。
###3. 产品改版AB测试能做什么
产品优化时,经常会遇到下面问题:
- 新页面改版是否可以提升页面的停留时间,提升页面关键行为的转化率?
- 关键行为button样式调整,是否能带来更多的点击,提升转化率?
- 新算法是否能有效提升运营效率,提高产品转化率?
- 新流程是否流畅,比旧流程更好的用户体验?
- 新活动,是否有更高的活动转化率?
以上针对活动页、产品功能、页面布局、文案内容、产品UI、算法等模块的转化率、跳出率、复购率、停留时间、活跃度、留存率、点击率等指标都可以通过A/B测试优化提升。总而言之,A/B测试能让你通过科学可预测的方式提升所有的要优化的产品指标。
###4. 数极客A/B测试的优势
数极客现有的用户行为分析系统,基于无埋点、有埋点、后端埋点多种方式采集的多维度用户行为数据和业务数据搭建的转化率、路径、活跃留存、精细化智能运营等用户行为分析模型和A/B测试系统能形成很好的用户行为打通耦合分析效果,可以高效地进行各种按照分群、用户行为创建的产品优化测试方案。同时数极客的AB测试还具有以下优势:
- 快速部署
- 可视化编辑测试
- 流量灵活分配
- 科学的统计算法
- 用户行为分析加成
- 实时监控
- 智能出结论
- 自动切换最优版本
###5. 如何做A/B测试
####5.1 扫码进入A/B测试编辑模式(具体操作如下)
a. 登陆数极客(http://www.shujike.com)后台创建试验
b. 配置完实验后通过浏览器扫描二维码进入app编辑模式(app 必须集成数极客SDk)
c. 点击 [AB测试] 按钮 进入ab测试界面
d. 点击 [创建试验] 按钮 创建新试验
e. 进入创建试验页面编辑相关试验属性
f. 点击 [开始可视化编辑] 按钮,启动app编辑模式
####5.2 对试验版本进行编辑
a. 对一个可进行多版本的添加和删除
b. 每个版本可进行元素的属性修改(问题内容/文字颜色/字号/字体/元素背景颜色/元素位置)
c. 编辑完成后退出应用并返回数极客后台
获取试验相关信息
d. 点击需要编辑的元素,进入ab试验的编辑页面
此处可进行添加/删除版本等操作
以下为修改元素属性的相关截图
e. 修改完成后将对元素属性进行更新
####5.3 后台设置版本的名称和相关配置信息
可查看相关试验的列表,可以对每个试验进行设置










