所有文章 构建合适的东西

5个产生误导结果的用户研究错误

由FabricLoop团队  ·  2026年5月  ·  4分钟阅读

有一种用户研究比根本不做研究更糟:产生自信但错误结论的研究。当团队不做研究时,他们知道他们在假设上运营。当他们做糟糕的研究时,他们相信他们有证据——他们停止寻找。

下面的五个错误不是罕见的边缘情况。他们出现在大多数产品团队中,大多数时候,以令人惊讶地难以从内部发现的方式。

"用户研究的目标不是确认你的直觉。它是用证据替代你的直觉——包括你错了的证据。"

五个错误

错误
它在实践中的样子
错误1 询问假设的未来行为
团队问"你会使用做X的功能吗?"用户说是。团队构建它。没人使用它。人们对他们的未来自我是乐观的,在他们实际会做什么方面是差的判断者。总是询问过去的行为:"告诉我上一次你不得不处理X的时候。"
错误2 采访已经热爱产品的用户
充满超级用户和倡导者的研究小组产生温暖、积极、专注于改进的反馈。他们不产生的是关于人们为什么离开、为什么从不转换或产品需要什么来达到新细分市场的洞察。也与流失的用户和非用户交谈——他们的反馈是不舒服但必要的。
错误3 确认现有信念的引导性问题
"你发现新的仪表板有多有帮助?"是一个引导性的问题。"告诉我上一次你使用仪表板的时候"不是。引导性问题产生礼貌的同意,而不是诚实的评估。研究人员对假设的依恋泄漏到问题措辞中,用户——作为社交意识——遵循信号。
错误4 不询问"为什么"就停在"什么"
一个用户说:"我想要一种过滤列表的方式。"研究人员注意"用户想要过滤。"但过滤是一个解决方案,而不是需求。用户实际上在尝试做什么,过滤会帮助什么?"为什么"的答案是设计洞察所在的地方——它通常揭示了比用户提议的更好的解决方案。
错误5 将定性研究视为定量
"五个用户中的三个说他们发现它令人困惑"不是统计数据。它是来自五个人的定向信号。定性研究告诉你什么和为什么;它无法告诉你有多少。用数字精度呈现它给利益相关者虚假的信心,并经常导致在规模上优化错误的东西。

为什么这些错误如此持久

大多数研究错误是有动机的。团队已经有了他们想要去的方向——他们想要构建的功能、他们相信的假设、他们想要满足的利益相关者。研究成为了已经做出的决定合法化的仪式,而不是真正尝试测试它。

解决方案不是使研究人员在隔离中更严格。这是将"决定构建什么"的角色与"运行通知该决策的研究"分开。当研究人员也是提议该功能的人时,确认偏差几乎是不可避免的。

一个有用的规范 在任何研究会话之前,写下什么结果会使你改变主意。如果你无法命名它,你不是在做研究——你是在做戏剧。陈述一个伪造结果的能力是真正的调查和确认偏差之间的区别,有额外的步骤。
关于样本量 对于可用性测试,五到八个参与者揭示大多数问题——递减回报很快设定。对于问题发现采访,十二到十五个通常足以达到饱和。对于你想要定量推广到大人口的任何东西,你需要一个有代表性样本的适当调查——不是十个采访。
FabricLoop如何支持诚实的研究 将原始采访笔记、综合和决定保存在同一线程中使得悄悄丢弃不便的发现变得更难。当证据与决定并排可见时,团队可以看到结论是否遵循了所学——或者它是否在前面。

从这篇文章中得到的10件事

  1. 糟糕的研究比没有研究更糟——它产生虚假的信心并阻止团队进一步寻找。
  2. 永远不要询问假设的未来行为。改为询问具体的过去行为。
  3. 倡导者的研究小组产生温暖、专注于改进的反馈——不是关于人们为什么离开或从不转换的洞察。
  4. 与流失的用户和非用户交谈。反馈是不舒服且必要的。
  5. 引导性问题产生礼貌的同意,而不是诚实的评估。仔细观察你的措辞。
  6. 当用户提议解决方案时("我想要过滤"),总是询问为什么。答案通常揭示一个更好的解决方案。
  7. 定性研究告诉你什么和为什么。它无法告诉你有多少。不要用数字精度呈现它。
  8. 大多数研究错误是有动机的——决定已经做出,研究被用来合法化它。
  9. 将提议功能的人与运行评估它们的研究的人分开。
  10. 在任何研究会话之前,写下什么结果会使你改变主意。如果你无法,你不是在做研究。