知识卡片

普通读书笔记卡 · 5451.a.3.c.5

面对回归测试永远做不完的压力,真正该先问的问题是"哪些可以不测",而不是"接下来测什么"

理解等级:高级

回归范围持续扩大时,测试团队应同时问“哪些不能漏”和“哪些可以承担不测的风险”。长期未出问题不等于未来安全;但在容量有限时,可依据影响、变化和既有证据调整重复验证投入,并定期复查取舍。跳过是显式风险决策,不是用过去通过次数证明功能永远正确。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 第16章 剥析Socialtext的测试 · 查看原书依据

      回归测试和流程改进 回归测试和流程改进 测试组的压力来自于很多方面。如果我们每两周都重新测试每个方法则更会增加这种压力。做不到一半测试组就会落后很多。如果变成自动化测试,那么我们会有同样的麻烦——正如我之前提到的那样,自动化测试会留下很多的盲点。 可能听起来很怪,但重要的问题是:有什么是我们不用测试

    参考来源

    - 位置:《测试之美》第16章《剥析Socialtext的测试》(源文件:extracted/程序之美系列套装(6册)团队之美、项目管理之美、架构之美、数据之美、测试之美、安全之美/_epub-src/OEBPS/Text/part0559.xhtml) - 结论依据:原文说明每轮重测会压垮容量,提出反问哪些测试可跳过,并用黑天鹅反例限制“过去稳定所以未来安全”的归纳。 - 原始内容:回归测试和流程改进 回归测试和流程改进 测试组的压力来自于很多方面。如果我们每两周都重新测试每个方法则更会增加这种压力。做不到一半测试组就会落后很多。如果变成自动化测试,那么我们会有同样的麻烦——正如我之前提到的那样,自动化测试会留下很多的盲点。 可能听起来很怪,但重要的问题是:有什么是我们不用测试的?有什么测试我们可以跳过?有什么测试好像一直没问题,我们期待不会有问题并留给我们肯定的数据? 这些是关于真理的哲学问题、归纳法中的经典问题。俗话说,如果我们要判断一个句子的真实性,例如“所有的天鹅是白的”,一个黑天鹅的出现比一百万个白天鹅的出现更有说服力。[1] 在过去的几年里,我们改变了很多次(测试)实战方法。无所不知是不可能的,但如果我们在每个迭代上都花上8小时时间测试那些行之有效的功能,并将此放在一个独立的部分代码里面,那我们就会有充分的行之有效的测试方法。我们在流程的开始部分加进了一些审查,改变了迭代日程,也对我们组的碰头会的形式进行了修改。 也许到了我该告诉你们阶段测试的时候了。 [1]我今年到现在为止读到