2017-10-17130
如果有高人指点,只要你更改 App Store 商品详情页的一个图形元素,就能让应用转化率提高 66%,猜你二话不说就会去做!
可惜,这样的高人并不存在,但是这个例子只是为了说明: A / B测试对于应用在市场的表现情况至关重要!转化率每增加 1%,你的收益将增加 1%。这就是现实!
此时你们的的疑问应该是 ↓↓↓
“常年都在说 A / B 测试这个老梗,
有没有具体的测试流程呢?”
今天的文章中,名鹊科技会向你详细介绍 A / B 测试的方法,看完之后你就没有任何借口不做 A / B 测试了哟!准备好了吗?开车!
Google Play 自带 A / B 测试功能,如果你的产品在这个平台发布,那做 A / B 测试就很方便。但如果你的应用发布于 iOS 平台,就要麻烦一些。
哪些内容需要测试?
这个问题的答案视不同情况而定,总结来说:观察 App Store 的商品详情页,最容易被忽略的内容则是最最需要测试的内容。假如你的 icon 设计得精致又特别,相比下来截图显得暗淡无趣,那你就可以先从截图入手,换一些效果同样醒目的截图,看看哪个效果更好。根据 StoreMaven 的数据显示:视频、截图和图标是最影响转化率的几个因素。StoreMaven 对不同的因素做了一个影响力分析,请见下图:
在哪里查看转换率?
如果你的应用是在 Google Play 发布的,在“Acquisition Reports”标签下即可查看自然下载的转化数据。Google Play 可以显示基准数据,让你查看自己的 App 与同类应用表现的差距。
如你所见,如果你的应用转化在所属类别中的平均值之下,Google 会告诉你,你还有多少下载量的差距。
要查看 iOS 商店的转化率,请打开 “Analytics” 页面,然后点击“转化率”。 选择此选项后,图表将显示每日的转化率。
如果你想在 iOS 控制面板只看到自然用户的数据,请为“App Store Browse”或“App Store Search”设置过滤器,如下所示:
1、肉眼观察法
这种方法勉强称之为 A / B 测试吧,但还是可以了解到哪些素材的表现更好。如果你期待看到很明显的转化率提升效果,建议不要依赖使用这种方法。
优点
免费
简单易上手,只需上传新素材,等待几周,然后比较前后的转换率
缺点
* 效果不准确,反弹严重
* 即便不做测试,转换率的波动每月也会高达50%,会误导测试假设
无发布前测试
你必须先发布产品,才能使用此测试方法。比较适合已经稳定的产品。
测试周期长
为了看到明显的效果,你必须留出足够长的时间来收集数据,少说两三周,多则一两月。
这种方法适用于哪种情况?
你的应用仅发布于 iOS 平台
没有付费广告的预算
没有网站的登录页面可以运行测试
你百分之百确定新的变化将提高转化率
2、Google Play 的 A / B 测试
如果你的App发布于 Google Play,可以使用这个方法。
在 Google 后台,你可以对图标、描述、功能图形,截图和促销视频等进行A / B测试。
设置 Google 测试很简单。打开 Google Play 信息中心,然后点击此处:
这里有两种测试类型:
全球范围 - 全球测试会向全球所有用户展示你的测试素材。比较适合不涉及文本(如图标)的元素,不会因为语言不通产生理解上的问题。
本地测试 - 仅针对目标语言的用户展示本地化测试。适合测试包括文本类(如标题)的元素,测试的人群会更精准。
设置好了测试项并开始运行,它应该是这样的:
测试开始后,你能做的就是等待。当测试达到90%的置信度时就会结束,你的数据就可用了。以下是 Google 关于如何在 Store Listing 中运行 A / B 测试的文档,可供您参考:
https://support.google.com/googleplay/android-developer/answer/6227309?hl=zh-Hans
优点
免费
数据准确。来自Google 官方的数据可靠度还是杠杠滴。当然,统计学意义和“90%置信区间”允许出现一些误差。
操作方便。只需要提交你需要测试的内容素材即可
缺点
仅适用于Google Play。希望苹果公司能够发布自己的 A / B 测试工具,但目前只是梦想。
如果你在 Google Play 和 iOS 商店中都有应用,可以使用 Google Play 商店的 Store Listing 进行测试,然后将最好的结果应用于 iOS 商店。
无发布前测试
你需要先发布的应用,再进行测试。
适合哪种情况
你的应用在Google Play上发布。
3、第三方测试软件
如果你手里有预算,我们建议你使用像 SplitMetrics,Storemaven 或 Test Nest 之类的第三方测试服务来模拟应用商店页面进行A / B 测试。根据我们的经验,他们给出的分析报告算是比较专业的。
你只需要创建测试活动,然后设置好变量,观察效果即可。
例如,你可以创建两个模拟应用页面,每个页面都有不同的图标。通过 Facebook 广告或其它任何流量来源,查看哪一个转化最好。用户点击模拟应用页面上的“安装”后,将被引导到产品的登录页,如果用户感兴趣,会在这里注册并留下自己的账户信息。
以下是 Illusion Labs 进行的一个实验,他们测试了 3 种不同图标的效果。
正如你所看到的,第一个版本的图标转换效果是最好的,这也是他们最后采用的图标。
优点
可以做预发布测试。在 App 正式发布之前就可以测试一些元素。
允许一次测试更多的变量。
支持使用像 AppsFlyer 这类归因链接来跟踪用户行为。比如用户下载之后的购买行为等。
例如,也许变量 A 比变量B的转化高 10%,但 AppsFlyer 的数据显示,看到变量B比变量A的用户多消费了 20%。你会选哪个变量?当然是变量 B 啦!
缺点
费用支出不能少,运行测试所需软件的价格是每月 $149(TestNest)起
测试的过程中会有用户流失。当用户点击模拟应用页面上的“安装”时,他们并没有被直接跳转到真实的应用下载界面,而是需要两次或多次点击和跳转。在此过程中,就会有一部分用户流失
这种方法适合哪些情况?
多适用于 iOS 平台的应用
预发布 A / B 测试
有测试预算,并且同时开启付费广告活动
4、付费广告素材测试
付费广告即 Facebook 广告或其它广告联盟提供的推广服务。如果你有投放广告的需求,那你就有对广告素材进行 A / B 测试的需求。
运作模式就是同时投放多组广告素材,直接使用 Facebook 广告来测试你的广告素材。看起来像这样:
Facebook 以外的其它广告联盟,也可以在广告中测试图标、描述或截图。
例如,如果使用 Chartboost,你可以测试这些: