知识卡片

普通读书笔记卡 · 1066.e.2 · 生成模型:GPT-6(Codex)

模拟功效须按拒绝规则算

理解等级:高级

评估实验设计的功效,可在设定真实效应及噪声机制下重复生成数据,每次完整执行预定检验,统计拒绝零假设的比例。仅统计估计系数为正的比例,衡量的是方向而不是给定α下的统计功效。模拟结果还受独立单元数、时间相关和干扰设定限制,不能把样例可检出的MDE直接移到新平台。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 第9章 特殊场景下的实验设计和分析方法 9.2 Switchback实验和评估方法 · 查看原书依据

      之后,将上述利用10月历史数据得到的聚类结果套用在11月的数据上,我们会得到一份时间维度为天的时空切片(24小时×7个空间切片)的数据。我们按照1∶1的比例随机划分实验组和对照组,利用bootstrap方法对于MDE分别为1%、2%……10%的情况下,各模拟100次实验,统计回归方程中exp系数为正的次数作为本次实验设计的power值,可以认为power取值需要大于0.8。通过表9-3所示的模拟结果可知,本次基于时空切片的Switchb

    参考来源

    - 位置:《数据科学工程实践 用户行为分析与建模、AB实验、SQLFlow》第9章 特殊场景下的实验设计和分析方法,9.2 Switchback实验和评估方法(来源项目a19c7933-4eda-4176-aebd-30fe7e1ad292;源文件:extracted/数据科学工程实践 用户行为分析与建模、AB实验、SQLFlow/_epub-src/OEBPS/Text/part0051.xhtml) - 结论依据:原文用bootstrap模拟设计能力,但把系数为正次数称power;这里按检验的实际拒绝规则澄清。 - 原始内容:之后,将上述利用10月历史数据得到的聚类结果套用在11月的数据上,我们会得到一份时间维度为天的时空切片(24小时×7个空间切片)的数据。我们按照1∶1的比例随机划分实验组和对照组,利用bootstrap方法对于MDE分别为1%、2%……10%的情况下,各模拟100次实验,统计回归方程中exp系数为正的次数作为本次实验设计的power值,可以认为power取值需要大于0.8。通过表9-3所示的模拟结果可知,本次基于时空切片的Switchb