Усі статті Побудуйте правильну річ

5 помилок дослідження користувачів, які виробляють оманливі результати

От команди FabricLoop  ·  Травень 2026  ·  4 хвилини читання

Є версія дослідження користувачів, яка гірша, ніж повне відсутність дослідження: дослідження, яке виробляє впевнені, але неправильні висновки. Коли команда не проводить дослідження, вони знають, що працюють на припущеннях. Коли вони роблять погане дослідження, вони вірять, що мають докази — та вони перестають шукати далі.

П'ять помилок нижче — це не екзотичні крайові випадки. Вони видаються в більшості команд продукту більшість часу способами, які дивно важко помітити зізнутрі.

"Мета дослідження користувачів не підтвердити ваші інстинкти. Це замінити ваші інстинкти доказами — включаючи докази того, що ви помилялися."

П'ять помилок

Помилка
Як це виглядає на практиці
Помилка 1 Запитання про гіпотетичну майбутню поведінку
Команда запитує "Чи ви використовували б функцію, яка зробила X?" Користувачі кажуть так. Команда будує це. Ніхто не використовує. Люди оптимістичні щодо своїх майбутніх «я» та погані судді щодо того, що вони насправді роблять. Завжди запитуйте про минулу поведінку: "Розповіжте мені про останній раз, коли вам було потрібно розбиратися з X."
Помилка 2 Інтерв'ювання користувачів, які вже люблять продукт
Дослідницькі панелі, заповнені енергійними користувачами та прихильниками, виробляють теплі, позитивні, орієнтовані на вдосконалення відгуки. Те, що вони не виробляють, це розуміння того, чому люди пішли, чому люди ніколи не перетворювалися, або що продукт потребує для досягнення нового сегменту. Поговоріть також з користувачами, які вийшли та не-користувачами — вони дискомфортні, але сутідні.
Помилка 3 Вели питання, які підтверджують існуючі переконання
"Наскільки корисною ви знайшли нову панель приладів?" — це вілене питання. "Розповіжте мені про останній раз, коли ви використовували панель приладів" ні. Вілене питання виробляють вежливу згоду, а не чесну оцінку. Прив'язаність дослідника до гіпотези пропускається в формулювання питання, та користувачі — будучи соціально свідомими — наслідують сигнал.
Помилка 4 Припинення на "що" без запитання "чому"
Користувач каже: "Я хотів би спосіб фільтрувати список." Дослідник записує "користувачі хочуть фільтрування." Але фільтрування — це рішення, а не потреба. Що користувач насправді намагається зробити, фільтрування допоможе? Відповідь на "чому" — це місце, де живе розуміння дизайну — та це часто розкриває краще рішення, ніж те, яке запропонував користувач.
Помилка 5 Обращение якісного дослідження як кількісного
"Три з п'яти користувачів сказали, що вони знайшли це заплутаним" не є статистикою. Це напрямна сигналізація від п'яти людей. Якісне дослідження розповідає вам що та чому; воно не може розповісти вам скільки. Представлення його з числовою точністю дає зацікавленим сторонам помилкову впевненість та часто призводить до оптимізації для неправильної речі в масштабі.

Чому ці помилки такі стійкі

Більшість помилок дослідження мотивуються. Команда вже має напрямок, яким вона хоче йти — функцію, яку вона хоче побудувати, гіпотезу, в яку вона вірить, зацікавлену сторону, яку вона хоче задовольнити. Дослідження стає ритуалом для легітимізації рішення, яке вже було прийнято, а не справжньої спроби його протестувати.

Рішення не в тому, щоб зробити дослідників більш суворими в ізоляції. Це відділення ролі "вирішення що побудувати" від "запуску дослідження, яке інформує цього рішення." Коли дослідник також є людиною, яка запропонувала функцію, упередженість підтвердження майже неминуча.

Корисна норма Перед будь-яким дослідницьким сеансом напишіть результат, який би змусив вас змінити свою думку. Якщо ви не можете це назвати, ви не робите дослідження — ви робите театр. Здатність назвати фальшивий результат — це різниця між справжнім дослідженням та упередженістю підтвердження з додатковими кроками.
Про розмір вибірки Для тестування придатності п'ять-вісім учасників виявляють більшість проблем — зменшення повернення швидко встановлюється. Для інтерв'ю про відкриття проблеми дванадцять-п'ятнадцять зазвичай досить для досягнення насичення. Для будь-чого, що ви хочете узагальнити кількісно для великої популяції, вам потрібен належний опитування з репрезентативною вибіркою — не десять інтерв'ю.
Як FabricLoop підтримує чесне дослідження Зберігання сирих примітокі інтерв'ю, синтезу та рішень у тому ж потоці утруднює тихо відкидати незручні висновки. Коли докази видимі поряд з рішенням, команда може бачити, чи висновок випливав з того, що було навчено — або передував їм.

10 речей для вилучення з цієї статті

  1. Погане дослідження гірше, ніж жодне дослідження — воно виробляє помилкову впевненість та зупиняє команди від подальшого пошуку.
  2. Ніколи не запитуйте про гіпотетичну майбутню поведінку. Замість цього запитуйте про конкретну минулу поведінку.
  3. Дослідницькі панелі прихильників виробляють теплі, орієнтовані на вдосконалення відгуки — не розуміння того, чому люди йдуть чи ніколи не конвертуються.
  4. Поговоріть з користувачами, які вийшли та не-користувачами. Відгук дискомфортний та сутідний.
  5. Вілені питання виробляють вежливу згоду, а не чесну оцінку. Ретельно спостерігайте ваше формулювання.
  6. Коли користувач пропонує рішення ("я хочу фільтрування"), завжди запитуйте чому. Відповідь зазвичай розкриває краще рішення.
  7. Якісне дослідження розповідає вам що та чому. Воно не може розповісти вам скільки. Не представляйте це з числовою точністю.
  8. Більшість помилок дослідження мотивуються — рішення вже було прийнято та дослідження використовується для його легітимізації.
  9. Відділіть людину, яка пропонує функції, від людини, яка запускає дослідження, яке їх оцінює.
  10. Перед будь-яким дослідницьким сеансом напишіть результат, який би змусив вас змінити свою думку. Якщо ви не можете, ви не робите дослідження.