第 27 章
A/B 测试与实验框架
没有测试的优化是猜。让数据替你决策。
★ 与 Premier Partner 的关系
系统性测试是成熟代理的标志。实验的目的不是追求形式，而是减少误判并积累可复用结论。
完整的 A/B 测试流程#
- 提出假设：例如"将 RSA 标题从'Buy Now'改为'Get 20% Off'会提升 CTR"
- 设计实验：创建 Campaign Draft & Experiment。确保实验组和对照组平分流量（50/50）
- 确定样本量：CR 变化检测需要足够的点击量。公式：n = (Z² × p(1-p)) / d²
- 运行实验：至少运行 2 周（完整业务周期），期间不要调整
- 分析结果：Google Ads 会自动计算置信度。置信度 ≥ 95% 时认为有统计学意义
- 应用结论：获胜方案应用到正式 Campaign
常见测试类型#
| 测试类型 | 工具 | 测试周期 | 主要指标 |
|---|---|---|---|
| 广告文案测试 | Campaign Experiments | 2-4 周 | CTR、CVR |
| 出价策略测试 | Campaign Experiments | 2-3 个学习期 | CPA、ROAS |
| 着陆页测试 | VWO / AB Tasty / Google Ads Experiments（着陆页） | 2-6 周 | CVR、Bounce Rate |
| 受众测试 | 受众排除实验 | 2-4 周 | CPA、CTR |
| 预算测试 | 共享预算对比 | 2-4 周 | 转化量、CPA |
Google Ads Experiments 配置步骤#
- 进入 Campaign 页面 → 选择 Campaign → 实验
- 点击"创建实验" → "自定义实验"（Campaign Draft 方式）
- 命名实验组和对照组 → 设置流量分配（建议 50/50）
- 设置实验时长（建议不少于 14 天）
- 起草实验组的修改（如修改出价/文案/受众）
- 提交草稿 → Google 开始运行实验 → 等待数据积累
- 实验结束后查看报告 → 应用获胜方案或结束
相关性不等于因果
报表变化只能说明同时发生了变化，不能自动证明某个优化动作带来了结果。成熟优化师要区分三件事：平台归因、实验增量、业务利润。上线新素材后 ROAS 上升，也可能来自季节、价格、库存、竞品或转化延迟。
| 风险 | 错误做法 | 控制方式 |
|---|---|---|
| 同时改太多变量 | 无法判断胜因 | 每轮只测试一个核心假设 |
| 过早停止 | 把随机波动当结论 | 覆盖完整业务周期并预先定义停止规则 |
| 忽略延迟 | 近期 CPA 被高估 | 先查看 Days to conversion |
| 只看平台归因 | 高估真实新增价值 | 重要决策评估地理实验、品牌提升或其他增量方法 |
✓ 行动清单
- 为你的主要 Campaign 创建至少 1 个实验
- 建立测试日历（每月至少 2 个实验）
- 将实验结果记录到知识库供后续参考