知识卡片
级联模型端到端检查
上游模型指标改善不保证下游任务改善:上游输出分布可能变化,影响依赖它的模型。发布上游新版本前,应在代表性数据上检查整个链路及关键下游指标,并协调版本。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- Monitoring and reliability · 查看原书依据
the named entity recognition model demonstrated improvements on its own metrics while the downstream classifiers’ performance dropped.
参考来源
- 位置:《Machine Learning System Design》第14章《Monitoring and reliability》(来源项目 a19c7933-4eda-4176-aebd-30fe7e1ad292;源文件:extracted/Machine Learning System Design/_epub-src/OEBPS/Text/chapter-14.xhtml)
- 结论依据:原文的监控层次、定义或实例支持卡片说明;适用边界已注明。
- 原始内容:the named entity recognition model demonstrated improvements on its own metrics while the downstream classifiers’ performance dropped.