知识卡片
A/B实验的假设检验与证伪逻辑
内容
A/B实验的核心是一次假设检验：原假设是实验组和对照组没有差异，备择假设是有差异。它遵循的是证伪法而非满意法——先假定”没有区别”成立，再靠数据积累证据去推翻它，而不是先挑一个看起来可信的结论再去找支持证据。这跟陪审团”疑罪从无、用证据定罪”的逻辑一致，能避免过早锁定某个结论而对反面证据视而不见。
参考来源
- 位置：《数据科学工程实践》第7章《如何比较两个策略的效果》"7.3 A/B实验应用步骤"一节（源文件：_epub-src/OEBPS/Text/part0040.xhtml）
- 结论依据：原文明确"假设检验的目标是拒绝原假设，核心是证伪……证伪法……剔除那些无法被证实的假设。满意法存在着一个严重问题，即人们会在没有对其他假设进行透彻分析的情况下就坚持其中一个假设，对于大量反面证据视而不见"，并类比"证伪法的思考过程类似陪审团审判，首先假定一个人无罪，然后收集证据证明他有罪"。
- 原始内容：假设检验的目标是拒绝原假设，核心是证伪。一般来说，我们选择某一个假设可以有两种思考过程：一种是基于满意法的思考……另一种是证伪法，即剔除那些无法被证实的假设。满意法存在着一个严重问题，即人们会在没有对其他假设进行透彻分析的情况下就坚持其中一个假设，对于大量反面证据视而不见……证伪法的思考过程类似陪审团审判，首先假定一个人无罪，然后收集证据证明他有罪，如果有足够证据证明他有罪，就拒绝他无罪的假设。