知识卡片

普通读书笔记卡 · 1934.d

度量构建过程的三个指标

理解等级:中级

两个案例中,团队接受了不少妥协(花时间手动测试,尽管可以说“这不是我们的责任”),其实是基于指标隐性评估的。作者提出三个评估开发流程的指标:

1. 反馈时长(定性、间接;关注成本和上市时间):获得新特性实施反馈所需的时间和精力。量化取决于情况——有时是自动化太慢,有时是找不到合适的人给出正确反馈。反馈类型有集成问题和纯功能验证,来自利益相关者、API 使用者、最终用户;经验法则:优先处理阻碍开发活动的反馈(集成和 QA)。它能提示有问题,但指不出根因。

2. 每次迭代中可避免的集成问题数(定量、间接;关注内部质量控制):统计每个部署迭代中发现的、本可在私有构建中通过自动或手动验证轻松发现的问题。数字低或下降说明流程更成熟。区别于“QA 发现的错误数”的地方在于分类阈值——“之前的验证本可以轻松避免”。私有构建不必是完美完整的验证:好的规则是包含 API 契约测试,以及登录等全局重要功能或受变更影响的主流程测试。

3. 每次迭代恢复主干稳定所需的时间(定量、直接;关注代码库稳定性和团队维护能力):本地更新(git pull)后运行私有构建发现的问题的修复时间,加上修复破坏现有功能的问题的时间。它直接度量花在不引入新功能的活动上的时间和成本,专门反映本地私有构建中回归测试的效果;结果差可能说明执行私有构建缺乏纪律(本地环境没标准化或开发者不完全了解),或测试缺乏自动化。主干稳定性直接影响稳定版本和发布所需的工作量,是持续可部署的要素之一。

私有构建的成本:开发者最初的反对是要花更多时间照料本地环境、降低生产率和合入频率——合理,但执行私有构建的工作量仍远低于持续不稳定的主干、QA 往返和工单管理的成本,因为从引入到发现故障的时间越长,修复成本指数级增长。手动集成验证应是暂时的:私有构建中反复做的活动,全队应尽快承诺自动化;暂时的手动阶段应接近简单、有针对性、尽量便宜的冒烟测试。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    参考来源

    - 位置:《软件架构指标:度量软件系统的性能和架构质量》第05章《第5章 私有构建与指标:DevOps转型工具》5.7 指标(源文件:extracted/软件架构指标 度量软件系统的性能和架构质量/_epub-src/index_split_045.html,来源项目 book-sources) - 结论依据:第5章提出度量构建过程的三个指标:定性间接的反馈时长、定量间接的每迭代可避免集成问题数(本可在私有构建中发现的问题)、定量直接的每迭代恢复主干稳定所需时间,并论证私有构建的成本远低于后期发现缺陷的成本,手动验证应是暂时的冒烟测试并尽快自动化。 - 原始内容:此指标计算了在部署软件的每个迭代中发现的可避免问题,即那些可以在私有构建中通过自动或手动验证轻松检测到的问题。