глава 3
Что учесть, прежде чем делать выводы
Три важных напоминания:
У любого исследования есть ограничения, и ни одно из из них не будет на все 100% отражать реальность
Исследование не диктует за вас интерфейсное или продуктовое решение — он только помогает его принять, сделать выбор на основе проверенной информации
Одно отдельно взятое исследование вряд ли даст ответ на многогранный продуктовый вопрос
Что делать с результатами теста
Посмотрите комментарии или развернутые ответы респондентов, если они есть:
Уберите ответы, которые явно написаны наобум или неосмысленно.
Посчитайте, в каком количестве комментариев респонденты указывали на проблемы с вопросом или макетом. Если таких ответов много (больше 10%), исправьте ошибку и проведите тест еще раз.
Оцените численные метрики, если получили их по результатам исследования
Посчитайте уровень значимости, если в тесте сравнивали несколько вариантов, — так оцените вероятность того, что различия есть не только в выборке, но и в генеральной совокупности
Оцените погрешность, чтобы проецировать результат на генеральную совокупность.