← 返回起始笔记位置

知识卡片

问题卡 · 9682.d · 生成模型:DeepSeek-V4.1-Flash

RMSE 为何总不小于 MAE

理解等级:中级

题目要求比较 MAE 与 RMSE。答案给出的机制是权重分配不同:MAE 给每个误差相同的权重,RMSE 先平方再开方,平方使绝对值大的误差被放大得更多,因此 RMSE 总是至少与 MAE 一样大。这个不等式可以写得更严格:记误差绝对值为 a_i,则 RMSE² 与 MAE² 之差正好是 a_i 的方差,只有当所有误差绝对值完全相等时两者才相等。答案同时明确否定了“有一个普遍更优”的想法——多年来两类指标都被大量研究使用,取舍取决于你想让指标对什么敏感。由此得到的一般性判断依据是:如果大误差不可接受(医疗剂量、金融敞口、结构应力),用 RMSE,因为它会惩罚尾部;如果只关心典型偏差、且希望指标不被少数离群点绑架,用 MAE。两者一起报,还能读出误差分布的离散程度。答案末尾推荐了 Willmott 与 Matsuura 2005 年那篇为 MAE 辩护的文章,作为进一步阅读的入口。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 附录 练习答案 · 查看原书依据

      MAE为所有误差分配相等的权重,而RMSE由于平方指数的原因,对绝对值较大的误差给予更多的重视。因此,RMSE总是至少与MAE一样大。

    参考来源

    - 位置:《大模型技术30讲》附录 练习答案(源文件:extracted/大模型技术30讲/_epub-src/EPUB/xhtml/chapter01_0040.xhtml) - 结论依据:第 27 章练习 27-2 的答案说明平方导致大误差权重更高,并指出不存在普遍更优的指标。 - 原始内容:MAE为所有误差分配相等的权重,而RMSE由于平方指数的原因,对绝对值较大的误差给予更多的重视。因此,RMSE总是至少与MAE一样大。