知识卡片

普通读书笔记卡 · 5453.a.1.f.4.a.1.b.6.a

写自动化测试脚本时,"结果等于16"这条断言背后,藏着一个机器永远验证不了的隐性期待——"别出什么怪事"

理解等级:中级

自动化脚本只检查明确写下的断言,不会自动验证“没有别的怪事”。计算器返回16仍可能伴随输入框未禁用、旧数字未清除或耗时过长等问题;把整屏截图当断言又会对无关布局变化过敏。测试应选择稳定的业务断言,并保留人工探索来发现未预设的异常。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 第16章 剥析Socialtext的测试 · 查看原书依据

      个简单的测试脚本: 1.在第一个框中敲进4。 2.在第二个框中敲进4。 3.从列表中选择"Multiplication"(乘法)选项。 4.按"Submit"(提交)。 5.期望Answer(答案)中会出现16。 我们用计算机实现这些步骤,称之为自动化。问题是在每一个测试步骤末尾都会有一个隐性的第二

    参考来源

    - 位置:《测试之美》第16章《剥析Socialtext的测试》(源文件:extracted/程序之美系列套装(6册)团队之美、项目管理之美、架构之美、数据之美、测试之美、安全之美/_epub-src/OEBPS/Text/part0556.xhtml) - 结论依据:原文逐项列出显式算术断言遗漏的界面状态、输入残留与响应时间异常,推出未写入断言的隐性期待需要其他观察方式补足。 - 原始内容:个简单的测试脚本: 1.在第一个框中敲进4。 2.在第二个框中敲进4。 3.从列表中选择"Multiplication"(乘法)选项。 4.按"Submit"(提交)。 5.期望Answer(答案)中会出现16。 我们用计算机实现这些步骤,称之为自动化。问题是在每一个测试步骤末尾都会有一个隐性的第二期待:“没有怪事发生。” 最简单的对付“没有怪事”的方式是捕捉整个屏幕并比较运行结果。但如果真这样,任何时候开发人员移动按键,或改变屏幕设置,或其他任何事情都会使软件产生错误。 现在最常见的情况是,只检验具体提出的要求,这样就意味着你会错过以下一些现象: 图 16-1 一个非常简单的应用程序 ·图标的背景颜色不透明。 ·一旦按下"Submit"按钮,列表会重回之前“加法”的状态,从而看起来是“4+4=16”。 ·自输入第二个数值后,“取消”按钮变成无效。 ·应该是编辑无效(呈灰色)的Answer框却可以编辑。 ·操作用了8秒才完成。 ·只有新页面才有正确的答案,第一个输入的数值被清零了。换句话说,现在算式看起来像0+4=8。 如果测试者是会思考的人,那