A/B测试评测

A/B测试评测

A/B测试在各类网站设计中已经是比较常见的，本文着重讲讲A/B测试在应用推送领域的作用。

 

目前国外开通A/B测试的推送服务商只有swrve，而国内的个推也在前不久发布的smart push 2.0中集成了A/B测试的功能。

 

小编联系到个推相关的负责人，拿到了一个测试账号，用实际的操作详解A/B测试在推送中的作用。

 

个推的smart push2.0需开通相应的服务才能使用，其中包括智能推送（给用户打上标签）、A/B测试等功能。

 

登陆个推开放平台后，在智能推送中找到了新建A/B测试的入口，点击后进入如下界面。

 

小编首先进行的是针对同类人群对于不同文案的测试。选择应用，确定推送时间配置完成后，勾选A、B目标用户属性相同，这时可进一步划分用户的属性，比如根据给用户打上的Tag来划分，或是根据智能标签分组，小编选择的所有用户，设置测试的人数及比例后点击下一步：推送详情。

 

 

 

 

在推送详情中，可选择透传/打开应用/启动应用三种动作，小编选择的是启动应用，通知标题和内容做了两种不同的文案，一种是满100-10，另一种是满150-15，这里的目标仅仅是通过不同的文案测试用户的点击转化率，而并没有在应用中做实际的活动页面。点击完成即可发送该推送。

 

 

 

 

之后自动跳转到A/B测试列表，这里可以看到历史推送记录的详情和报表。

 

 

 

 

通过报表我们能清晰的看到两种文案的统计数据，便于我们进一步的分析和修改文案。

 

 

另外，除了对相同人群进行A/B测试，也可以进行相同的文案对不同用户的测试。小编又新建了一个A/B测试，A组根据智能标签选择了三省（注：东三省）的用户，B组选择了浙江标签的用户。

 

 

 

 

点击下一步后可以设置具体的推送信息，由于是推送相同的文案，因此在B组推送详情中勾选“与A组设定完全相同”，然后设置好A组的文案后点击完成即可发送。同样也可以在推送的报表中看到这个文案对于两类用户的反馈数据。

 

 

 

 

结语：A/B测试在推送中的应用非常广泛，结合推送服务商提供的智能推送标签等功能可将推送的分组做到更多的细分。提前进行小规模的A/B测试，对于拥有庞大用户量的应用非常重要，根据反馈调整推送文案，随后再进行大规模的推送，将比不做A/B测试就直接推送可靠许多。希望国内其他推送服务商也能尽快提供A/B测试的功能，共同将推送服务做得更好，同时也能拯救很多产品运营人员。