知识卡片
测试规模随反馈周期调整
变化快的开发分支需要小规模、高频测试,以便在结论过时前得到反馈;接近发布、较稳定的分支可投入较大测试集合换取更充分覆盖。测试规模应匹配分支变化速度和反馈时限,而非一刀切。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第22章 测试一百万个网页 · 查看原书依据
现并修正了。所以我们不想花了一个月的时间找了个bug,结果发现它早就被我们的社区发现并且已经改完了。TraceMonkey分支是处理这个问题的一个例子,维护分支(到成文时止为Firefox 3.0版)的持久测试是安全的。我们有一个15万个URL的集合,运行一次大概需要3~4周。我们在活动分支上只运行
参考来源
- 位置:《测试之美》第22章《测试一百万个网页》(源文件:extracted/程序之美系列套装(6册)团队之美、项目管理之美、架构之美、数据之美、测试之美、安全之美/_epub-src/OEBPS/Text/part0590.xhtml)
- 结论依据:原文以两个分支周期和测试规模的对照,说明深度测试耗时与活跃分支快速修复之间的张力,支持按生命周期分层。
- 原始内容:现并修正了。所以我们不想花了一个月的时间找了个bug,结果发现它早就被我们的社区发现并且已经改完了。TraceMonkey分支是处理这个问题的一个例子,维护分支(到成文时止为Firefox 3.0版)的持久测试是安全的。我们有一个15万个URL的集合,运行一次大概需要3~4周。我们在活动分支上只运行1000个URL的集合。运行一次大概需要4个小时,我们就可以每天都得到一次测试结果了。这是我们不断整合自动化测试的一部分。 那么,当我们遇到崩溃的时候会怎么样呢? 首先要做的是抓取这个页面,然后把它保存到本地。Web页面是会经常变的,所以依赖于一个实时更新的页面的风险就太大了。一旦页面被保存到本地,我们就需要做一些工作来重新对其进行测试,这是个很有技术含量的工作。如果崩溃是可重现的,我们就成功了一大半。 下一步我们需要把测试范围缩到最小最简单的形式。在一个完整的Web页面中会发生很多事情。有问题的代码需要被隔离出来,否则程序员得花费很多时间在看代码上。好消息是我们有Lithium[1]这个工具来做这个事情。它自动地把失败的页面抽象成为一个简单的测试用例