知识卡片

AB测试需指标

普通读书笔记卡 · 1704.e

内容

A/B 测试是本章讨论的多种反馈手段之一:把两个方案的选择转化为数据判断,前提是选对指标且样本足够大。只测按钮颜色可能优化了局部点击,却忽略用户是否找到商品。发散:数据实验不能替代理解用户,它只回答被正确提出的问题,通常需要和问卷、访谈等方法配合使用,而非单独依赖。

参考来源

- 位置:《以用户为中心的软件设计》第8章《收集反馈》"A/B测试"一节(源文件:_epub-src/text/part0048.html) - 结论依据:原文以购物车图标颜色为例说明"如果你用购物车图标颜色判定网站设计得成功,就可能遗漏了更有意义的条件——例如购物者寻找所购物品的能力",并提醒"正确的A/B测试可能需要大的样本才能收集有意义的数据",本章末尾内容提要将A/B测试与问卷、会谈、原型并列为多种反馈手段之一。 - 原始内容:此外,A/B测试的成功取决于选择正确指标的能力。例如,如果你用购物车图标颜色判定网站设计得成功,就可能遗漏了更有意义的条件——例如购物者寻找所购物品的能力……还要注意,正确的A/B测试可能需要大的样本才能收集有意义的数据。