原书出处
数据科学工程实践 用户行为分析与建模、AB实验、SQLFlow
07 第7章 如何比较两个策略的效果 7.3 A/B实验应用步骤
如果一个实验的核心指标是用户浏览–下单率(浏览用户数/下单用户数),那么这个实验的实验对象就是用户,实验周期内有过App使用行为的用户数就是这个实验的样本量。 如果一个实验的核心指标是App浏览–下单率(浏览频次/下单数),那么实验周期内App总共被打开的次数是这个实验的样本量,这里需要特别注意。 在这个例子中,核心指标是App浏览–下单率,所以实验周期内的用户数是这个实验的样本量。 已知实验目标人群过去两周平均每日打开App的次数约为50000次,若分成4组做实验,每组流量不一致,则需要保证流量最小的那组达到最小样本量的需求。举个例子,如果流量最小的那组占总流量的20%,那么流量最小的组平均每日打开App的次数约为50000×20%=10000。由于每组所需最小样本量为26000,则实验天数为26000÷10000≈3天。由于周天数会影响实验效果,所以建议实验取整周时间,将实验周期定为一周,同期避免其他可能的活动和实验干扰。
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/数据科学工程实践 用户行为分析与建模、AB实验、SQLFlow/_epub-src/OEBPS/Text/part0040.xhtml
EPUB SHA-256:b9d74c3cb9a87547f425283a2273004c2d73de2c2b50ebf97c2ab3336ae5d102