微信号:grzlwx

介绍:光荣之路官方资讯

如何在低流量站点进行A/B分离测试?

2015-09-14 22:15 光荣之路



“低流量”的真实含义是什么?多低流量才算低流量?

据初步估计,如果你的站点每周转化次数低于5-10次,你的站点就算是低流量站点。著名转化率专家Bryan Eisenberg在这个视频中如是说。

他还补充说,你应当做一次最长为期六周的测试,如果结果相差不大,就说明你所测试的东西可能是不会影响访客行为的。

另一个转化率专家Rich Page提出每周低于1000独立访客的站点是低流量站点。

问题在于,对小流量站点做分离测试似乎是徒劳的。

比方说,你当前转化率是5%,并且希望转化率提升至10%。如果你测试了4个变量,下面的曲线显示了根据站点流量,你应当等待多久才能获得决定性结果(即结果可信度达到95%):


谁会等几个月甚至几年来看决定性测试结果(统计可信度达到95%)呢?这毫无意义。

我了解你的感受,你的说法是对的,这并不那么容易。

但如果认为别无他法也是不对滴。本文证实要对此进行说明:小流量站点也能通过做分离测试来提升转化率。这样做:

1. 跟踪微观转化(Micro-Conversions),而不是宏观转化(Macro-Conversions)

是的,产品销售或者付费注册才是最终的目标。但是这种宏观转化相对更加困难。

在流量短缺的时候,不要用宏观转化来跟踪测试数据,而要通过发掘微观转化的测试结果来间接地助力销售。一旦了解从微观转化到最终目标的转化率,你就能计算出宏观转化的效果,并且了解到哪个测试版本对你有效。

2. 对高影响力的事物进行测试

也许你要测试一个新的定价方案?或者要替换一页焦点图来为你最热门产品分类的特惠活动进行宣传?确保站点所有重要的位置(比如页头、首屏和左侧区域)被重要页面元素占据,且这些页面元素应当有助于页面目标最终实现。应当多考虑一些会为未来的测试带来新见解和新方向的事。

有时,小变化会对转化率带来大影响。要想有这样的结果,关键在于要测试一些对顾客心理具有高影响力的事、能够影响他们的决定的事

了解他们的担忧,明白他们在你的站点上采取某种行动前主要考虑的因素。对于一个面向青少年和大学生的时装网站来说,价格和免运费非常重要。对于专注于高端名流的奢侈品牌,网站的当天送货保障或者独家精选区域会具有高影响力。

了解你的理想客户在意什么。当你对有高影响力的事物进行测试时,结果的大幅变化减少了获得统计上明显结果所需的时间。

3. 测试激进设计

当你让客户在一个红苹果和一个青苹果之间选择时,很难说大多数人更喜欢哪一个。你需要巨大的采样数量才能回答出来。让他们在苹果与橙子之间选择,甚至很小量的采样受众就能让你分辨出大多数人的喜好。

下表引自TechCrunch,完美地描绘了这一事实。剧变通常也会以对转化率影响巨大。注意,在原先的转化率与新转化率之间的差距扩大的同时,所需的测试访客数量与测试时长都有所下降:


因此,你如果你的流量很低,就放弃掉对按钮颜色的测试。剧变将使你快速得到决定性结果。

但这种测试的缺点是很难从中学习到什么。无不知道什么变化会使转化率增加或降低。是由于下面的立即行动按钮发挥了作用?还是由于头条的变化?或者是其他什么原因?

要克服这一缺点,一种很棒的方式是对两个不同主题开展页面级测试,而不是随机改变多个页面元素。这样,就可以很容易获得显著的客户学习经验,并且对于未来的测试非常有用。

要知道,当你获得了能够用于优化整体营销工作(包括线下活动)的经验,你就赚到了。一家康复机构的控制页面要专注于体现他们的豪华特色以及中心所在位置的僻静,当他们将页面与强调信任为本的竞品页面对比测试后发现,他们的流量提升了220%。

现在他们了解到,信任是他们客户的一大考虑。当这一经验运用于他们的其他300个站点时,他们的付费搜索收入增加了85%

这样一来,即使你改变了多个元素,你仍然可以对用户的动机了解更多,这将对你的CRO工作有进一步帮助。当测试激进设计时,应当对你页面的各种主题进行测试。你将很快得到结果,并且还会更加了解你的客户。

4. 忘记多变量测试 (MVT)

改变的变量越多,获得统计可信度所需的时间越长。有限的流量意味着你没有足够的资源来测试多个变量。坚持A/B分离测试,直到你有足够的流量。


在MVT中多个变量的分流

(未完待续)
(译者:李淳 来源:http://blog.csdn.net/lchren/article/details/43906945)

 
            
 
            
 
            
 
           
 
           
 
           
 
           
 
           
 
           
 
           
 
           
 
           
 
           

一字一句当思来之不易,感谢作者,传播测试知识、技能与正能量!

光荣之路软件测试培训

官网:http://www.gloryroad.cn/

微信公众号:gloryroadtrain

性能测试QQ群:415987441
软件测试招聘QQ群: 203715128
自动化3群QQ: 371211499


 
光荣之路 更多文章 今天晚上的 linux 公开课- Awk 编程 7月28日(今天)晚上的 linux 公开课- shell编程 8月4日(今天)晚上的 linux 公开课- shell编程 9月1日(本周一)晚8点半,光荣之路Web自动化系列基础课—javascript第二讲 推荐本好书《与机器赛跑》
猜您喜欢 iOS微信小视频优化心得 热点事件的超高流量,挑战新浪微博镜像分发系统 SRE,一场消灭人类的战争 基于.NET平台常用的框架整理 DevOps,你是谁?从哪里来?到哪里去?