知识卡片
度量构建过程的三个指标
两个案例中,团队接受了不少妥协(花时间手动测试,尽管可以说“这不是我们的责任”),其实是基于指标隐性评估的。作者提出三个评估开发流程的指标:
1. 反馈时长(定性、间接;关注成本和上市时间):获得新特性实施反馈所需的时间和精力。量化取决于情况——有时是自动化太慢,有时是找不到合适的人给出正确反馈。反馈类型有集成问题和纯功能验证,来自利益相关者、API 使用者、最终用户;经验法则:优先处理阻碍开发活动的反馈(集成和 QA)。它能提示有问题,但指不出根因。
2. 每次迭代中可避免的集成问题数(定量、间接;关注内部质量控制):统计每个部署迭代中发现的、本可在私有构建中通过自动或手动验证轻松发现的问题。数字低或下降说明流程更成熟。区别于“QA 发现的错误数”的地方在于分类阈值——“之前的验证本可以轻松避免”。私有构建不必是完美完整的验证:好的规则是包含 API 契约测试,以及登录等全局重要功能或受变更影响的主流程测试。
3. 每次迭代恢复主干稳定所需的时间(定量、直接;关注代码库稳定性和团队维护能力):本地更新(git pull)后运行私有构建发现的问题的修复时间,加上修复破坏现有功能的问题的时间。它直接度量花在不引入新功能的活动上的时间和成本,专门反映本地私有构建中回归测试的效果;结果差可能说明执行私有构建缺乏纪律(本地环境没标准化或开发者不完全了解),或测试缺乏自动化。主干稳定性直接影响稳定版本和发布所需的工作量,是持续可部署的要素之一。
私有构建的成本:开发者最初的反对是要花更多时间照料本地环境、降低生产率和合入频率——合理,但执行私有构建的工作量仍远低于持续不稳定的主干、QA 往返和工单管理的成本,因为从引入到发现故障的时间越长,修复成本指数级增长。手动集成验证应是暂时的:私有构建中反复做的活动,全队应尽快承诺自动化;暂时的手动阶段应接近简单、有针对性、尽量便宜的冒烟测试。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第5章 私有构建与指标:DevOps转型工具 · 查看原书依据
此指标计算了在部署软件的每个迭代中发现的可避免问题,即那些可以在私有构建中通过自动或手动验证轻松检测到的问题。