如何创建A/B测试

这个章节,我们将会对A/B测试的设定方式进行说明。无论你是否有没有经验,你都可以通过这一章节快速上手,成为一名A/B测试高手。

在深入学习本章内容之前,我们强烈建议您优先阅读弹窗制作页面编辑.

为什么要做A/B测试?

A/B测试是一种使用两种或更多的变量(例如页面首图、区块内容等页面元素)来确定哪个灵感可以对用户行为产生最大影响并对我们的最终转化目标做出贡献。

通过进行A/B测试,您可以在优化网站时做出基于数据与科学算法,而非凭直觉或猜测的决策。

如果您想要进行更灵活或全面的创意测试,而不仅仅是简单的区块测试,还可以考虑使用重定向测试

1. 创建AB测试

在Experience中,您可以创建新的A/B测试,或者向现有的体验中增加测试组。跟随下面的流程,可以可以创建一个新的测试。

1.1 在已有的体验中开启A/B测试

如果您希望在现有的体验中开启A/B测试,可以参考以下步骤。

2. 具体设置

在设置中,您可以进行详细设置,包括流量分配、最短测试期限、胜率区间、以及防闪等功能。

2.1 流量分配

默认设置下是流量分配是平均分配,但你也可以自定义比例流量分配

平均分配:各将流量均匀分配给每个分组。

自定义比例分配:请确保总和为100%。
在进行一段时间的A/B测试后,如果您希望增加流量到表现良好的分组上,也可以使用自定义选项。

2.2 Ptengine如何得出结果的

Ptengine的A/B测试的运行时间一般由"胜率"来决定是否结束或继续。通过设置"胜率"和"最小测试时间"的阈值,可以控制测试的准确性以及判定测试何时结束。

2.2.1 优胜率

"优胜率"是指一个版本相对于其他版本被判定为具有优势的概率。默认的设置为(95%以上)。当"优胜率"超过95%时,可以有信心判定测试的胜负,并且在考虑最小测试时间的情况下,测试结果将显示在报告中

"优胜率"的置信区间可以更改为"90%"或"98%"。
百分比较低时,测试期限较短,但准确性较低。相反,百分比较高时,测试期限较长,准确性较高。

2.2.2 最小测试时间

"最小测试时间"的设置是为了确保在开始测试后的一段时间内不会对测试结果进行判定。
由于受到周期的影响,初始值通常建议设置为7天。
"最低测试期限"可以在3天到14天之间进行更改。

Tip:操作实例

<快速得到一个结果(时间:短 / 准确性:低)>
・优胜率:90%
・最小测试时间:3天

<确保准确度的基础上以周为单位进行测试
(时间:默认 / 准确度:默认)>
・优胜率:95%
・最小测试时间:7天

<通过一个长时间的测试获得一个最精准的结果(时间:长 / 准确度:高)>
・优胜率:98%
・最小测试时间:14天

2.3 防闪功能

防闪功能是一种用于减轻在编辑页面内容并展示体验时,原始页面会短暂显示的现象的功能。在Ptengine中,默认情况下启用了反闪烁功能。

为正确使用反闪烁功能,您需要将Ptengine的基本标签直接粘贴到页面的HTML源代码中。如果标签已经通过GTM或其他标签管理工具安装,则放闪功能可能无法正常工作,从而影响用户体验,如果过程中遇到问题,请联系我们的技术支持。

3. 如何设置Goal目标


编辑体验后,我们可以针对不同页面与不同用户群体做展示。
也就是说在Ptengine中,您可以轻松个性化用户体验!

有关设置目标的方法,请参阅此处

Was this article helpful?

  • Yes, great!
  • Not really

Thanks for your feedback.

  Sorry about that. Do you mind sharing how we can improve?

    Write your feedback here...

Powered by BetterDocs