知识卡片
数据泄漏
内容
数据泄漏发生在训练数据包含了预测时无法获得的信息,模型因此学到“作弊线索”而不是可泛化规律。离线指标会很好,线上效果会崩。发散:[[评价先于模型]]之外还要检查数据生成时间线,很多泄漏问题本质是时间边界被混淆。
参考来源
《图灵程序设计丛书:数据科学从入门到实战(套装全8册)》第08章《数据科学实战》
知识卡片
数据泄漏发生在训练数据包含了预测时无法获得的信息,模型因此学到“作弊线索”而不是可泛化规律。离线指标会很好,线上效果会崩。发散:[[评价先于模型]]之外还要检查数据生成时间线,很多泄漏问题本质是时间边界被混淆。