原书出处
大模型技术30讲
29 第29章 训练集和测试集的不一致性
在更详细地研究数据集之前,我们应该检查数据加载代码和评测代码中的技术问题。例如,
一种简单的健全性检查是用训练集临时替换测试集,并重新评测模型。在这种情况下,我们应该看到训练集和测试集的表现相同(因为这些数据集现在是相同的)。如果我们发现差异,很可能代码中存在bug。
根据我的经验,这样的bug通常与不正确的数据重排或不一致(通常是缺失)的数据归一
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/大模型技术30讲/_epub-src/EPUB/xhtml/chapter01_0037.xhtml
EPUB SHA-256:aed12db0b1b08a8757496d8d12796b8829fa2546eb77ccf47b557e4abbb6a0ec