Виды тестов и их применение
В этой главе обзор популярных методов, но, конечно, этот список не исчерпывающий.
4.1 Тест первого клика
Респондент видит один экран и решает задачу, которую он мог бы сделать в этом интерфейсе в реальной жизни. Задача респондента — найти и нажать на элемент, с которого ему надо начать выполнять нужное действие.
Тест первого клика помогает проверить:
Что учесть при проведении теста:
- Нельзя формулировать вопрос с использованием названия кнопки или пункта меню.
- При сравнении двух экранов таким методом обязательно посчитайте и учтите уровень значимости.
Какие результаты получите:
- Карта кликов с возможностью выделить области экрана для сравнения количества нажатий.
- Время до клика отразит, насколько просто респонденту было прийти к нужному ответу.
- Среднее и медианное время поможет проанализировать результат для всей выборки в целом.
4.2 Preference-тест
В тесте сравнивают два или больше экрана (изображения, элемента интерфейса, текста). Их попарно показывают каждому респонденту на одном экране и задают вопрос относительно оцениваемого параметра (например: «Какой вариант кажется вам более выгодным?»). Задача респондента — выбрать один из этих вариантов.
Для высококонкурентных продуктов это не просто "приятная мелочь", а неотъемлемая часть выигрышной стратегии. Это связано с более позитивным восприятием удобства использования и общего доверия.
Preference-тест помогает оценить:
Что учесть при проведении теста:
- Макеты должны различаться всего одной деталью, при этом изменение должно быть заметным. Лучше не сравнивать похожие оттенки или шрифты, тексты уведомлений или кнопок.
- Мы рекомендуем вводить оцениваемый параметр в вопросе, чтобы респонденты могли сравнивать варианты относительно этого параметра (например, эмоциональность или доверительность).
- При анализе результатов важно смотреть на уровень значимости, чтобы убедиться, насколько различимы между собой варианты. Подробно о нем — в главе «2. Готовимся к исследованию».
- За один тест можно менять только одну деталь, иначе не получится понять, почему респонденты предпочли тот или иной вариант.
- Нельзя сравнивать экраны своего и других сервисов. Между ними может быть слишком много различий, которые не сгладить.
- Результаты Preference- и A/B-теста могут не совпасть. Хоть эти методы и похожи, первый показывает субъективное впечатление, второй — поведение пользователей в реальности.
Какие результаты получите:
- Процент людей по каждому экрану, которые его выбрали.
- Развернутые комментарии респондентов, почему они выбрали тот или иной вариант.
Как определить победивший вариант
Для этого нужно оценить погрешности для долей респондентов, которые выбрали каждый из вариантов и представить полученные значения в виде интервалов. Это можно сделать с помощью нашего калькулятора.
Если интервалы пересекаются, то статистически значимая разница не доказана, а если интервалы не пересекаются, то победителем является вариант, выбранный наибольшим количеством респондентов.
4.3 Пятисекундный тест
Респондентам показывают экран на 5 или больше секунд, а затем просят описать, что они увидели.
Пятисекундный тест помогает проверить:
Что учесть при проведении теста:
- Не предупреждайте людей, что именно им нужно увидеть и запомнить.
- Не говорите респондентам, что они будут видеть экран 5 секунд и потом ответят на вопрос, — нужно только ограничить время демонстрации страницы.
- 5 секунд может быть недостаточно для некоторых материалов. В этом случае лучше увеличить время показа экрана, например до 10 или 20 секунд.
- Для сравнения разных версий дизайна лучше использовать Preference-тест.
Какие результаты получите:
Качественные ответы респондентов, которые можно будет разбить на смысловые группы или категории.
4.4 Карточная сортировка
Респондентам нужно распределить темы по группам.
Если группы заранее заданы, то это закрытая карточная сортировка, если респондентам нужно самим определить группы и их названия — открытая.
- Как они распределят их по категориям «праздничная одежда», «юбки и брюки», «аксессуары».
- Или на какие группы они их делят — так поймете, какие категории они хотят видеть в каталоге.
Карточная сортировка помогает понять, как организовать информационную архитектуру сайта:
- Классифицировать каталог.
- Структурировать меню страницы.
Что учесть при проведении теста:
- Тест не поможет проверить текущий каталог или меню — в этом случае лучше проводить исследование по методике Treejack. Карточная сортировка подходит для создания структуры с нуля.
- Метод не даст готовую структуру каталога или меню. Результаты нужно проанализировать и выявить принципы, которыми руководствовались респонденты при обозначении групп и распределении предметов по группам.
Какие результаты получите:
- Для открытой сортировки — категории каталога или пункты меню, выделенные респондентами.
- Для закрытой сортировки — распределение элементов по группам, которое сделали респонденты.
4.5 Сценарное тестирование
Это упрощенный формат юзабилити-тестирования, в котором исследуют несложный сценарий.
Сценарное тестирование помогает проверить:
Что учесть при проведении теста:
- Следите за сложностью сценария. Чем больше возможных вариантов действий пользователя — тем больше смысла в проведении модерируемого исследования.
- Не всегда можно узнать, почему у пользователя возникли сложности, даже если будете видеть его путь или ответы на дополнительные вопросы.
Какие результаты получите:
- Записи сессий пользователей.
- Метрики взаимодействия со сценарием — например среднее и медианное время сессии, количество пользователей, которые не достигли результата.