A/B 实验(触达节奏与话术)
实验用来比较两种不只是文案层面的方案:两套触达节奏、两种销售话术,或者落地页的两个版本。每位参与者会被稳定地分配到某个版本,CRM 计算转化率,并且只有在样本量足够时才会指出胜出方案。
营销活动内部的 A/B 测试比较的是文案,衡量的是打开率和回复率。实验则用于那些放不进去的场景:比较两套触达节奏、两种销售话术、两份电话脚本,或者一个页面的两个版本。这里的指标是转化,也就是当目标达成时由您登记的一个是或否。
创建一个实验
- 在菜单的分析里打开实验。
- 在新建实验板块填写名称。
- 选择类型:话术、触达节奏或通用。类型只是用于归类的标签,不会改变计算方式。
- 填写版本 A 的标签和版本 B 的标签,它们就是会出现在结果里的名称。
- 点击创建。实验以进行中状态生成。
本页面创建的实验带两个版本。每位参与者按其记录上的一个固定算法分配,因此同一条线索始终落入同一个版本,也绝不会被重复计入。如果您已经确定了胜出方案,之后进来的参与者会直接进入该方案。
看懂结果
在左侧列表中点击某个实验,右侧就会出现结果表格,每个版本一行:参与者、转化数、转化率和提升幅度。提升幅度是把该版本与第一个版本相比得出的,第一个版本充当对照组,因此对照组自己那一行显示为一条横线。
- 样本量足够:胜出方案是可信的。只有当所有版本都至少有 20 位参与者、并且最佳版本超过对照组时,这句话才会出现。
- 样本量尚不足以得出可信的胜出方案。只要这句话还在页面上,CRM 就不会下任何结论,哪怕某个转化率明显更高。
- 只有在已经得出胜出方案、且实验尚未定案时,应用胜出方案按钮才会出现。点击后实验转为已定案。
Example: 实验以痛点开场对比以数字开场,类型为话术,跑了三周。以痛点开场这一版有 128 位参与者、14 次转化(10.9%)。以数字开场这一版有 131 位参与者、23 次转化(17.6%),提升幅度为 +61%。由于两版都超过了 20 位参与者,页面显示样本量足够,于是您点击应用胜出方案。
测试落地页
要测试 CRM 之外的两个页面版本,请在这里创建实验,并让每个页面向 CRM 上报:页面加载时上报一次浏览事件,表单提交时上报一次转化事件。调用使用实验跟踪的公开地址,并带上您空间的线索捕获令牌。结果会落到同一张表格里,遵循同样的胜出方案规则。
POST /api/public/experiment-track
{
"token": "<您空间的线索捕获令牌>",
"experimentId": "<实验 ID>",
"variantKey": "a",
"subjectRecordId": "<访客标识符>",
"event": "view"
}边界与权限
- 名称最多 200 个字符。本页面创建的实验带两个版本。
- 最低样本量为每个版本 20 位参与者,且是固定的:没有可以修改它的字段。
- 必须拥有营销活动模块的访问权限才能打开这个页面。在按用户计费的套餐中,A/B 测试功能需要包含在您所签的版本里。
- 转化不是由 CRM 猜出来的:必须有人登记这位参与者已经转化。正是这一点让数字可审计,而不是被编造出来。
常见问题
- 它和营销活动里的 A/B 测试有什么区别?营销活动里的那个比较消息文案,并自动衡量打开率和回复率。实验可以比较任何东西,衡量的是由您声明的一次转化。
- 一位参与者会换到另一个版本吗?不会。分配结果被保存并保持不变,即使实验之后有所改动也一样。
- 应用胜出方案之后会怎样?实验变为已定案,之后进来的参与者都会拿到胜出的那个版本。
- 为什么列表是空的?要么是还没有创建过实验,要么是您的角色没有营销活动模块的访问权限。