知识卡片
双边匹配市场不能按用户ID随机分流
内容
外卖、网约车这类撮合供需双方的平台，产品策略同时影响乘客/食客和司机/骑手两端，而且一次匹配结果会波及同一时刻及后续一段时间内的其他匹配（[[网络效应破坏AB实验的独立性假设]]）。这类平台不能像普通App功能那样按用户ID简单随机分流——被分到实验组的一方，行为仍然会通过撮合关系影响到对照组的另一方。这类”多边网络效应”场景需要在匹配关系之外找一个不受策略干扰的维度来切分实验组和对照组。
参考来源
- 位置：《数据科学工程实践》第9章《特殊场景下的实验设计和分析方法》"9.2.1 不能使用随机分流策略的情况"一节（源文件：_epub-src/OEBPS/Text/part0051.xhtml）
- 结论依据：原文明确外卖等多边市场"产品策略会对每一个匹配结果产生影响，单独对匹配的一方进行基于用户id的随机分流无法测算其对另外一方的影响以及双方互相影响的叠加效果"，且"一次匹配结果的变化可能会对同时刻及后续一段时间内其他的匹配产生影响……由于网络效应的存在，数据分析师无法在匹配关系的层面进行随机分流"。
- 原始内容：产品策略会对每一个匹配结果产生影响，单独对匹配的一方进行基于用户id的随机分流无法测算其对另外一方的影响以及双方互相影响的叠加效果。匹配类型的产品策略一般都是全局优化的结果，一次匹配结果的变化可能会对同时刻及后续一段时间内其他的匹配产生影响，一般把这个影响当作市场中多个参与方之间的'网络效应'。正是由于网络效应的存在，数据分析师无法在匹配关系的层面进行随机分流。