知识卡片
F值为何用调和平均
F 值(F-measure)把 P 与 R 合成一个数,定义为二者的调和平均:F = 2PR / (P + R),等价写法是 F = 2 / (1/P + 1/R)。
选调和平均的理由是它被较小的一方主导。只要 P 或 R 有一个接近 0,F 就接近 0;算术平均却会被较大的值拉高,掩盖短板。极端例子:R=1、P=0 时,算术平均是 0.5,看着“及格”,调和平均是 0,正确表达了这套结果不可用。
用法与边界:F 适合做单一汇总数字,用于快速比较两套系统或比较同一系统的两组参数。它有两处局限——一是隐含 P 与 R 同等重要,业务明显偏向一端时(问答要准、专利检索要全)单看 F 会掩盖真实偏好;二是 F 只统计相关性,不含位置信息,两个 F 相同的系统,可能一个把好结果排在第一页、一个排在第十页。要看前列质量需换用[[只看前排的P@N与MRR]]。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第6章 搜索系统评价 · 查看原书依据
它的好处在于能够使用单一的数字综合反映系统性能,被定义为准确率和召回率的调和平均数,如公式(6-7)所示。使用调和平均数而不是数字平均数的原因是,调和平均数强调较小的值的重要性,数字平均数受极值影响较大。
参考来源
- 位置:《智能搜索和推荐系统:原理、算法与应用(零基础掌握搜索和推荐系统的原理、架构、算法) (智能系统与技术丛书)》第6章 搜索系统评价(源文件:extracted/智能搜索和推荐系统:原理、算法与应用(零基础掌握搜索和推荐系统的原理、架构、算法) (智能系统与技术丛书)/_epub-src/text/part0086.html)
- 结论依据:原文给出 F 的定义形式(调和平均)并对比算术平均,用 R=1、P=0 的极端例子论证调和平均更能暴露短板。
- 原始内容:它的好处在于能够使用单一的数字综合反映系统性能,被定义为准确率和召回率的调和平均数,如公式(6-7)所示。使用调和平均数而不是数字平均数的原因是,调和平均数强调较小的值的重要性,数字平均数受极值影响较大。