知识卡片

普通读书笔记卡 · 1610.a

金丝雀就是AB对照比较

理解等级:初级

定义:金丝雀是对服务变更做部分或有限时间的部署并加以评估,评估结果决定是否继续推广。接收变更的部分是“金丝雀”,其余是“对照组”——金丝雀实际上是一个 A/B 测试过程。名称来自把金丝雀带进煤矿检测有毒气体:鸟更小、呼吸更快,比人更早中毒。

为什么需要:即便发布管道完全自动化,有些缺陷也要等真实流量到达才会暴露——测试环境与生产不可能 100% 相同,测试也覆盖不了所有情况。立即全量部署,缺陷也会全量部署。金丝雀让管道尽早发现缺陷、影响尽可能小;逐步扩大流量也逐步建立对变更的信心,并能发现单元测试、负载测试等较“人工”的框架中看不到的问题。

三项要求:把金丝雀变更部署到服务总体子集的方法;判断变更“好”还是“坏”的评估过程;把评估集成进发布流程。金丝雀的价值在于:能以高置信度识别坏的候选版本,同时对好的版本不误报。

示例(App Engine):故意让候选版本 20% 的请求失败。不用金丝雀直接全量部署,监控立刻报告高错误率;若无法回滚,只能在中断中找缺陷、打补丁、再部署,几乎必然延长用户受影响时间。用金丝雀按版本切分流量(也可以用负载均衡后端权重、代理配置、轮询 DNS),总体错误率几乎看不出来——这反而引出一个问题:金丝雀的信号在总体趋势中很难看到。按版本拆分 HTTP 响应码(对数刻度)后,新版本引入的错误一目了然。于是可以让部署自动反应:金丝雀错误率与对照组相差太大就判定为坏,暂停并回滚或通知人工;相近则继续。

译文提示:本书为社区机器辅助译本,本卡按上下文和官方英文版理解,引文保留中文原样。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    参考来源

    - 位置:《谷歌站点可靠性工作手册》第16章《第16章 金丝雀发布》16 什么是金丝雀发布;发布工程和金丝雀发布;金丝雀过程的要求;前滚部署与简单的金丝雀部署相比(源文件:extracted/谷歌站点可靠性工作手册/_epub-src/OEBPS/Text/22.html,来源项目 book-sources) - 结论依据:第16章把金丝雀定义为对变更做部分或限时部署并据评估决定是否推广的A/B过程,说明其因测试无法覆盖生产而必要,列出部署子集、评估、集成发布三项要求,并以App Engine 20%错误率示例对比全量部署与金丝雀,强调需按版本拆分指标才能看到金丝雀信号。 - 原始内容:金丝雀实际上是A/B测试过程。