Feature Flags

规模化 A/B 测试的最佳实践：用实验协议统一标准

Datadog 的两位作者介绍了他们产品里叫“实验协议”的功能。原来团队做 A/B 测试时，指标、分流方式、放量节奏和分析方法都靠一份评审文档约定，每个实验的人都要手动重搭一遍，团队多了就容易各做各的。实验协议把已经评审通过的这套方法存成可复用的配置，新建实验时选一个已发布的协议，字段会自动带入草稿，还能按需修改。读者可以借此让同类实验有统一的起点，减少配置不一致带来的问题，也能在实验上线前就把主指标和防护指标定好。