原书出处
数据科学工程实践 用户行为分析与建模、AB实验、SQLFlow
07 第7章 如何比较两个策略的效果 7.3 A/B实验应用步骤
进行A/B实验时很容易犯的一个错误就是看到实验结果可信就立即停止实验。这个做法是错误的,对于很多实验来讲,实验前段时期的显著性是在显著和不显著之间波动的,特别是对于UI改版,这种用户有直观感知的运营方案,实验组的任何改变都会引起用户的特别注意,因此需要足够的样本量和更长的实验周期涵盖实验前期的波动,直到显著性趋于平稳。此外,如果实验过程中出现异常事件,例如异常天气等,可能需要延长实验周期以获取更多有效样本。
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/数据科学工程实践 用户行为分析与建模、AB实验、SQLFlow/_epub-src/OEBPS/Text/part0040.xhtml
EPUB SHA-256:b9d74c3cb9a87547f425283a2273004c2d73de2c2b50ebf97c2ab3336ae5d102