知识卡片
用户调查的两个偏差
用户调查的结论经常「看起来对、用起来错」,原因是三类系统性偏差。
1)直接提问失效。问卷里直白地问「你对推荐满意吗」,用户给不出真实判断,容易给礼貌性答案。需要先问可核对的行为与情境(频率、场景、支出),再问评价——前面的问题为后面的判断提供锚点。 2)幸存者偏差。客服反馈虽然出自真实体验,但愿意主动反馈的用户在数量与分布上与整体差距很大;客服渠道只覆盖当前存留用户,流失用户的痛点根本进不来。销售侧的问题相反:他们对接的用户往往缺乏使用体验,表述偏主观。 3)拉新盲区。销售与客服触达的都是库内存量用户,不在库里的潜在用户只能靠随机抽样调查触及——而改版时若补上这类调查,新用户留存会有明显提升。
对策不是换载体,而是换抽样:按画像分层、随机抽取、控制问卷长度与激励,把问题设计成能引导出具体场景而非笼统评分。注意引导本身是双刃剑:对比型问题会产生锚定效应,既能挖出真实权衡,也可能把用户推向预设答案。[[主观评估:用户调查补的是哪一段]]
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第9章 推荐系统的评价 · 查看原书依据
也可能是一种幸存者偏差。所有与客服主动沟通的用户反映的痛点仅仅适用于当前存留的用户,对于流失用户,很可能不具有代表性。
参考来源
- 位置:《智能搜索和推荐系统:原理、算法与应用(零基础掌握搜索和推荐系统的原理、架构、算法) (智能系统与技术丛书)》第9章 推荐系统的评价(源文件:extracted/智能搜索和推荐系统:原理、算法与应用(零基础掌握搜索和推荐系统的原理、架构、算法) (智能系统与技术丛书)/_epub-src/text/part0128.html)
- 结论依据:原文把客服反馈的局限明确归因为幸存者偏差,并指出其对流失用户不具代表性,这是「主动反馈样本不能代表总体」的直接依据。
- 原始内容:也可能是一种幸存者偏差。所有与客服主动沟通的用户反映的痛点仅仅适用于当前存留的用户,对于流失用户,很可能不具有代表性。