Содержание
Глава 3
Как проанализировать результаты и сделать выводы
Что учесть, прежде чем делать выводы
Три важных напоминания:
- У любого исследования есть ограничения, и ни одно из из них не будет на все 100% отражать реальность
- Исследование не диктует за вас интерфейсное или продуктовое решение — оно только помогает его принять, сделать выбор на основе проверенной информации
- Одно отдельно взятое исследование вряд ли даст ответ на многогранный продуктовый вопрос
Что делать с результатами теста
Посмотрите комментарии или развернутые ответы респондентов, если они есть:
- Уберите ответы, которые явно написаны наобум или неосмысленно.
- Посчитайте, в каком количестве комментариев респонденты указывали на проблемы с вопросом или макетом. Если таких ответов много (больше 10%), исправьте ошибку и проведите тест еще раз.
Оцените численные метрики, если получили их по результатам исследования
Посчитайте уровень значимости, если в тесте сравнивали несколько вариантов, — так оцените вероятность того, что различия есть не только в выборке, но и в генеральной совокупности
Уровень значимости
Вероятность того, что реальное значение находится в пределах погрешности. В большинстве случаев используют 95%.
Оцените погрешность, чтобы проецировать результат на генеральную совокупность.
Уровень значимости
Вероятность того, что реальное значение находится в пределах погрешности. В большинстве случаев используют 95%.