A/B 实验是把"感觉应该这样写"换成"数据告诉我应该这样写"的最快路径。本文以 Hero 文案为例。
前置：明确假设
A/B 不是"试试看"。开始之前必须有清晰假设：
- 当前 Hero（A）："我们提供专业的数据库审计解决方案"
- 挑战版（B）："给金融机构看得清楚每一次数据库访问"
- 假设：B 比 A 转化率高 30%+，因为更具体、更有结果导向
配置实验
- 工作台「运营 OS-A/B 实验」点"新建"
- 选择目标元素：Hero Section 的 H1
- 填写 A / B 两个版本的文案
- 设置目标指标：LeadForm 提交率（默认）
- 设置流量分配：50% / 50%（推荐）
- 设置最低样本量：每组 ≥ 1000 次曝光（系统提示）
- 点击启动
观察结果
工作台仪表盘实时展示：
- 曝光量 / 点击量 / 转化量（A vs B）
- 相对提升（B 比 A 提升或下降百分比）
- 统计置信度（达到 95% 才视为可决策）
避免太早做决策
即使 D2 看起来 B 显著领先，也务必跑满 7 天 + 1000 样本。流量在不同时段（工作日 vs 周末）行为差异很大。
结束实验
达到置信后点"采用 B 为正式版本"，系统自动把所有流量切到 B，并归档实验数据。失败的版本不会丢，作为后续学习的参考。