知识卡片
A/B实验的三大特性
内容
A/B实验之所以可靠，来自三个特性：先验性——实验结论是在方案上线前就设计好要验证的假设，而非事后归纳出来的解释；并行性——多个方案同时在线运行、共享同一时间窗口的外部环境，避免了先后测试可能引入的时间偏差，也省去了排队验证的时间；科学性——流量按用户特征均匀随机分配到各组，保证组间除方案本身外高度同质。三者共同保证了组间的差异能被干净地归因到方案本身。
参考来源
- 位置：《数据科学工程实践》第7章《如何比较两个策略的效果》"7.2.3 A/B实验的基本原理"一节（源文件：_epub-src/OEBPS/Text/part0039.xhtml）
- 结论依据：原文明确"A/B实验的应用方式决定了它拥有三大特性：先验性、并行性和科学性"，并逐条说明先验性是"预测性结论，与'后验'的归纳性结论差别巨大"，并行性"保证了每个版本所处环境的一致性……也节省了验证的时间"，科学性指"流量分配的科学性……确保每个组用户特征的相似性"。
- 原始内容：A/B实验的应用方式决定了它拥有三大特性：先验性、并行性和科学性。先验性：A/B实验其实是一种"先验"的实验体系，属于预测性结论，与"后验"的归纳性结论差别巨大。并行性：A/B实验会同时在线实验两个或两个以上方案，这样做的好处在于保证了每个版本所处环境的一致性……也节省了验证的时间……科学性：这里强调的是流量分配的科学性……确保每个组用户特征的相似性。