知识卡片
Switchback实验用时空切片承载分组
内容
面对[[双边匹配市场不能按用户ID随机分流]]的困境,Switchback实验不按用户分组,而是把时间和空间组合成”时空切片”(比如某个区域某个小时),让实验组和对照组的策略在不同时空切片上来回切换生效。因为同一时刻同一区域内的所有匹配都执行同一套策略,两端参与者之间的网络效应被限制在切片内部,不会像按用户分流那样直接污染对照组,这是应对双边市场网络效应的核心思路。
参考来源
- 位置:《数据科学工程实践》第9章《特殊场景下的实验设计和分析方法》"9.2.2 Switchback实验的基本原理"一节(源文件:_epub-src/OEBPS/Text/part0051.xhtml)
- 结论依据:原文明确"Switchback实验基于一些不受网络效应干扰的特征对实验样本进行切分……实验组和对照组会在某一个特征上来回切换……我们称时间维度和空间维度的组合为时空切片",目的是"在没有策略时,实验组、对照组的表现在统计上无差异(A/A实验通过),在进行匹配策略的实验时,网络效应产生的干扰也非常小"。
- 原始内容:Switchback实验基于一些不受网络效应干扰的特征对实验样本进行切分,然后把切分的结果按照某种方式分配给实验组和对照组。实验组和对照组会在某一个特征上来回切换,以达到在没有策略时,实验组、对照组的表现在统计上无差异(A/A实验通过),在进行匹配策略的实验时,网络效应产生的干扰也非常小。在外卖平台的业务场景中,数据分析师可以利用空间和时间进行实验组和对照组的区分,我们称时间维度和空间维度的组合为时空切片。