知识卡片
假设检验:被数据推翻的NFL弃踢常识案例
度量最有力的用途之一,是主动挑战那些被当作常识、却从未被真正验证过的假设。美式橄榄球有近百年历史,一条长期被公认的教练理念是:如果进攻方三次进攻未能达成首攻(推进10码),且距离得分太远,就应该选择弃踢——因为如果第四次进攻失败,对手会在很有利的位置获得球权,弃踢看起来是更安全的选择。按作者写作时的叙述,大约十年前,一些统计人员开始分析第四次进攻成功率、不同球场位置的首攻转化数据后发现:如果球队码数剩余较小、且球权位置靠近中场,从统计上看,选择第四次进攻的期望收益其实优于弃踢。像新英格兰爱国者队教练Bill Belichick这样思想开明的教练开始把这个发现付诸实践,作者称当时部分特定情境已采用此策略;这里转述书内历史案例,不据此判断今天所有球队的最优决策。这个案例最深刻的启示是:如果没有人花时间收集历史数据去检验这个”常识”,弃踢将永远是”最佳选择”,这个错误的教学理念可能永远不会被改变——软件开发中同样存在大量类似的、从未被真正验证过的假设(比如”增加开发时间能提高质量”“越大的团队越低效”“更有经验的程序员总能把困难任务完成得更好”),要检验这类假设,需要先明确该假设依赖哪些可测量的变量(比如检验”经验丰富的程序员完成困难任务更好”,就需要同时收集任务复杂度、程序员经验级别、完成质量三类数据),再收集真实数据来验证或推翻它。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 测量程序员的工作 译注4 · 查看原书依据
度量给出了数据来检验你的假设
参考来源
- 位置:《程序员度量:改善软件团队的分析学》第2章《测量程序员的工作》"假设检验"一节(源文件:_epub-src/OEBPS/text00008.html)
- 结论依据:原文详述NFL第四次进攻决策的统计分析历史,说明"从统计方面来讲,如果一个球队拥有小的码数剩余……他们会优先选择第4次进攻而不是弃踢",并列举"增加开发时间可以提高软件质量和客户满意度""越庞大的团队越效率低下"等待验证的软件开发假设,直接支撑本卡片结论。
- 原始内容:如果没有人花时间基于从之前的成果中收集数据然后检验这个假设的话,那么弃踢就永远都是最佳选择,这种老的教学理念或许永远都无法获得改变……不论上面的假设是对还是错,如果没有好的数据来证明,你永远都不知道。