走在科学与艺术的交叉路口,数据一直帮助我们优化生产。就在最近几天,我们用户体验团队使用团队新开发的网页A/B Testing工具AB Tester(www.abtester.cn),对BiddingX官方网站(www.biddingx.com)进行了一次大刀阔斧的“改版”。改版之前,BiddingX产品经理再三嘱咐我们:不要玩坏了我的网站!可是……

改版之前:

BiddingX 首页改版前

由于账户是由商务同事分发,无法直接从官网获取,而我们官方网站的用户往往是新用户。所以大家觉得“登录”按钮在这里会分散“在线申请”的注意力,会一定程度分享“在线申请”的点击率。因此,直接在AB Tester编辑器界面……干掉了“登录”按钮:

BiddingX 首页改版后

胆大的我们,直接上一部分流量开始真人实验,A/B Testing我们的改动了。

第一天……

A/B Testing 第一天

虽然置信度(转化率的可信程度)只有60%,好歹最终结果提升了6.4%,实验版本没有让大家失望。不过心里总是还有一点小忐忑,明天小笑脸你可别哭啊。

第二天……

A/B Testing 第二天

置信度到82%了,提升率也到16.7%了,想想还有点小激动。产品经理终于不会说我们玩坏BiddingX官网了。再等等吧,置信度依然没有达到统计学上常见的95%,因此我们再继续观察观察。

第三天……

AB Testing 第三天

实验出乎意料,一个微小的改动,对申请的点击率提升了25%,置信度也达到了93%。不过其中也还是存在更多的思考:原版本点击登录却无法登录的用户然后干什么去了?实验版本点击“立即申请”的朋友由是否如愿申请了呢?这些我们也需要通过网站分析中其他退出、跳出、流向数据帮助我们进一步了解真相。(由于篇幅,就暂不包含在本篇)

另一方面,我们还利用AB Tester在没有任何技术同学参与的情况下,改善我们的表单填写,对之前复杂的表单进行了精简,原来表单是:

表单 原版本

经过简单的拖拽修改,精简后的版本:

表单 实验版本

由于表单页面流量较小,我们使用了全流量进行测试,因此数据就不便透漏了,但是肯定的说,提升率又是绿色笑脸。

笑脸

最后,感谢为BiddingX团队改造生产力的A/B Testing工具:

AB Tester

感谢BiddingX产品经理姐姐的支持:

BiddingX LOGO

最最最后,小小的广告一下,本司有:

  • BiddingX DSP 广告投放工具
  • Clicki 网站分析工具
  • AB Tester 网页A/B Testing工具
  • 用户研究、移动广告发力中…

不限量招聘:

  • 有节操有数据观产品经理
  • Hadoop数据挖掘工程师
  • Golang后端研发工程师
  • MySQL高级运维工程师
  • Web前端研发工程师
  • Android/iOS研发工程师
  • 各种其他公司有,我们公司就有的岗位…

1 对 “DSP探花BiddingX团队如何利用数据改造生产力”的想法;

发表评论

您的电子邮箱地址不会被公开。