知识卡片
可观测性数据即业务结果数据
来自模型的可观测性数据对业务绝对根本,既有大量文献谈缺失监控的负面后果,正面后果同样存在。作者爱用的例子是延迟与在线销售的关系:2008 年 Amazon 发现每多 100ms 延迟就损失 1% 销售,反向也成立——越快越好;Akamai、Google、Zalando 等也确认过类似结果。作者断言:没有可观测性根本不可能发现这一效应,更不可能确知自己是在把它变好还是变坏。结论是「可观测性数据归根到底是业务结果数据」;在 ML 时代,它让你不仅能检测和响应故障,还能理解业务中正在发生的极重要的事。这也为全章后面「业务 KPI 必须与模型指标关联」「SLO 最好落在业务目标而非 ML 系统性能上」埋下依据——忽略它的风险由组织自己承担。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- Monitoring and Observability for Models · 查看原书依据
In 2008, Amazon discovered that each additional 100 ms of latency lost 1% of sales, and also the converse—so, the faster the better.4 Similar results have been confirmed by Akamai Technologies, Google, Zalando, and others.
参考来源
- 位置:《Reliable Machine Learning》第09章《Monitoring and Observability for Models》(源文件:extracted/Reliable Machine Learning/_epub-src/OEBPS/ch09.xhtml)
- 结论依据:原文明确阐述该主题,并给出定义、实践或反例。
- 原始内容:In 2008, Amazon discovered that each additional 100 ms of latency lost 1% of sales, and also the converse—so, the faster the better.4 Similar results have been confirmed by Akamai Technologies, Google, Zalando, and others.