Все мифы → Работа методолога → № 18
Миф · Неправда
Проверять курс на людях — дорого и долго
Как на самом деле
Пять человек из аудитории найдут большую часть проблем за один день.
Сколько проблем находят тестировщики
Пример
БылоКурс запускаем сразу на 1000 человек.
СталоПять человек проходят черновик, правим. Ещё пять — правим. Потом запуск.
Почему так
Курс делают полгода и запускают сразу на тысячу сотрудников. Через месяц выясняется: третье задание никто не понял, видео во втором модуле не открывается на телефоне, а тест проверяет не то.
Якоб Нильсен в 2000 году показал: пять пользователей находят около 85% проблем интерфейса. Дальше каждый новый человек находит всё меньше нового. Лучше три раунда по пять человек, чем один на пятнадцать.
С курсом так же. Посадите человека из аудитории, дайте пройти урок и молчите. Записывайте, где он застрял, что пропустил, о чём спросил. Такая проверка занимает час и стоит чашку кофе.
Дорого — не проверять. Тогда за ошибки платит вся аудитория.
Что делать
- Проверяйте на 3–5 людях из аудитории, а не на коллегах.
- Тестируйте рано: черновик урока и прототип задания уже годятся.
- Не подсказывайте во время теста. Смотрите, где человек застревает сам.
Источники
- Nielsen J. Why You Only Need to Test with 5 Users (2000)
- Nielsen J., Landauer T. A mathematical model of the finding of usability problems (1993)
- Krug S. Rocket Surgery Made Easy (2009)