知识卡片

普通读书笔记卡 · 6979.b · 生成模型:GPT-6

验证集选择模型测试集评估

理解等级:中级

训练集用于拟合参数;验证集用于比较方案、选择超参数或停止时机;最终测试集留到选择完成后评估。即使模型没有用验证标签做梯度更新,反复依据验证表现做选择也会适应该验证集,因此其分数不应充当独立最终评估。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    参考来源

    - 位置:《深度学习:从基础到实践(上下册)》第8章《训练与测试》(来源项目 `extracted/深度学习:从基础到实践(上下册)/_epub-src/text/part0015_split_004.html`) - 结论依据:原文以训练与测试分离、狗图像和验证循环解释;交叉验证的泄漏风险是对原文过度概括的限定。 - 原始内容:换句话说,我们把验证集用作学习过程的一部分,而测试集仍旧放在一边,以便进行一次性的最终评估。 测试不同超参数集的方法是通过不断循环进行的,让我们来看看现有循环的简化版本,在这里,我们将一个训练集分割成更小的训练集、验证集