Немодерируемое тестирование масштабирует сбор поведения, но не позволяет исследователю немедленно уточнить непонятный эпизод. Поэтому сценарий, техническая среда и критерии анализа должны быть намного строже подготовлены заранее. основание Для темы «немодерируемое тестирование интерфейса» артефакт «пакет немодерируемого исследования» связывает компонент «Скрининг» с этапом «Выбрать подходящие вопросы»; неподтверждённые рекомендации остаются редакционными гипотезами темы «немодерируемое тестирование интерфейса».
Задача и проверяемые основания
GOV.UK рассматривает подготовку сессий и анализ результатов как обязательные части пользовательского исследования. основание
Классификация NN/g различает поведенческие и установочные методы, а также естественный и сценарный контекст использования. основание
Defra рекомендует применять прототипы для получения обратной связи до реализации сервиса. основание
WCAG 2.2 задаёт проверяемые требования к доступности интерактивного содержимого, важные для самостоятельной работы участника. основание
В артефакте «пакет немодерируемого исследования» вопрос «Может ли участник понять задачу без помощи?» хранится отдельно от решения «Подготовить стабильный прототип» и ограничения «причина ошибки часто остаётся неизвестной».
Рабочая модель
Скрининг. В теме «немодерируемое тестирование интерфейса» этот элемент означает проверка релевантного опыта и технических условий до запуска задания. В артефакте «пакет немодерируемого исследования» связь с компонентом «Инструкция» проверяют сценарием темы «немодерируемое тестирование интерфейса».
Инструкция. В теме «немодерируемое тестирование интерфейса» этот элемент означает самодостаточное объяснение цели, статуса прототипа и завершения. В артефакте «пакет немодерируемого исследования» связь с компонентом «Задания» проверяют сценарием темы «немодерируемое тестирование интерфейса».
Задания. В теме «немодерируемое тестирование интерфейса» этот элемент означает короткие независимые сценарии без помощи модератора. В артефакте «пакет немодерируемого исследования» связь с компонентом «Телеметрия» проверяют сценарием темы «немодерируемое тестирование интерфейса».
Телеметрия. В теме «немодерируемое тестирование интерфейса» этот элемент означает запись переходов, времени, ошибок и завершения с согласием. В артефакте «пакет немодерируемого исследования» связь с компонентом «Открытые ответы» проверяют сценарием темы «немодерируемое тестирование интерфейса».
Открытые ответы. В теме «немодерируемое тестирование интерфейса» этот элемент означает точечные вопросы после действия, не заменяющие поведение. В артефакте «пакет немодерируемого исследования» связь с компонентом «Контроль качества» проверяют сценарием темы «немодерируемое тестирование интерфейса».
Контроль качества. В теме «немодерируемое тестирование интерфейса» этот элемент означает выявление сбоев, случайных ответов и неполных сессий. В артефакте «пакет немодерируемого исследования» связь с компонентом «Скрининг» проверяют сценарием темы «немодерируемое тестирование интерфейса».
Порядок проектирования
1. Выбрать подходящие вопросы. Команда применяет шаг к теме «немодерируемое тестирование интерфейса»: оставить задачи, понятные без пояснений исследователя. Результат уточняет компонент «Скрининг», а спорные варианты темы «немодерируемое тестирование интерфейса» остаются в артефакте «пакет немодерируемого исследования».
2. Подготовить стабильный прототип. Команда применяет шаг к теме «немодерируемое тестирование интерфейса»: исключить ручные переключатели и случайные тупики. Результат уточняет компонент «Инструкция», а спорные варианты темы «немодерируемое тестирование интерфейса» остаются в артефакте «пакет немодерируемого исследования».
3. Написать самостоятельный сценарий. Команда применяет шаг к теме «немодерируемое тестирование интерфейса»: объяснить ситуацию, но не подсказывать путь. Результат уточняет компонент «Задания», а спорные варианты темы «немодерируемое тестирование интерфейса» остаются в артефакте «пакет немодерируемого исследования».
4. Провести внутренний прогон. Команда применяет шаг к теме «немодерируемое тестирование интерфейса»: дать сценарий людям вне команды без ответов во время выполнения. Результат уточняет компонент «Телеметрия», а спорные варианты темы «немодерируемое тестирование интерфейса» остаются в артефакте «пакет немодерируемого исследования».
5. Запустить ограниченную волну. Команда применяет шаг к теме «немодерируемое тестирование интерфейса»: проверить качество записей до расширения выборки. Результат уточняет компонент «Открытые ответы», а спорные варианты темы «немодерируемое тестирование интерфейса» остаются в артефакте «пакет немодерируемого исследования».
6. Разделить данные. Команда применяет шаг к теме «немодерируемое тестирование интерфейса»: отделить технические сбои, неполные сессии и проблемы интерфейса. Результат уточняет компонент «Контроль качества», а спорные варианты темы «немодерируемое тестирование интерфейса» остаются в артефакте «пакет немодерируемого исследования».
Практический пример
Редакционный пример: команда проверяла фильтры каталога вакансий на большой выборке. Участники получали задачу найти подходящую работу с заданными условиями и отправляли ссылку на результат. Пилот показал, что часть людей не понимала, что прототип не отправляет настоящую заявку. Инструкцию уточнили, не раскрывая путь к фильтрам. В анализе отдельно учитывали записи с мобильных устройств и исключали сессии, где прототип не загрузился.
Пример показывает, как «пакет немодерируемого исследования» помогает раньше обнаружить ошибку «использовать нестабильный прототип» и проверить критерий «сценарий проходит без пояснений» для темы «немодерируемое тестирование интерфейса».
Контрольные вопросы
- Может ли участник понять задачу без помощи? Ответ фиксируют в артефакте «пакет немодерируемого исследования» и связывают с компонентом «Скрининг»; мнение отмечают как допущение темы «немодерируемое тестирование интерфейса».
- Как обнаружить технический сбой? Ответ фиксируют в артефакте «пакет немодерируемого исследования» и связывают с компонентом «Инструкция»; мнение отмечают как допущение темы «немодерируемое тестирование интерфейса».
- Какие данные нужны помимо завершения? Ответ фиксируют в артефакте «пакет немодерируемого исследования» и связывают с компонентом «Задания»; мнение отмечают как допущение темы «немодерируемое тестирование интерфейса».
- Не подменяет ли открытый ответ наблюдаемое поведение? Ответ фиксируют в артефакте «пакет немодерируемого исследования» и связывают с компонентом «Телеметрия»; мнение отмечают как допущение темы «немодерируемое тестирование интерфейса».
Типовые ошибки
- Использовать нестабильный прототип. В артефакте «пакет немодерируемого исследования» для темы «немодерируемое тестирование интерфейса» ошибка искажает компонент «Инструкция»; рядом записывают последствие, обнаружение и исправление.
- Давать длинные зависимые задания. В артефакте «пакет немодерируемого исследования» для темы «немодерируемое тестирование интерфейса» ошибка искажает компонент «Задания»; рядом записывают последствие, обнаружение и исправление.
- Не проверять устройство и браузер. В артефакте «пакет немодерируемого исследования» для темы «немодерируемое тестирование интерфейса» ошибка искажает компонент «Телеметрия»; рядом записывают последствие, обнаружение и исправление.
- Считать незавершённую сессию ошибкой интерфейса. В артефакте «пакет немодерируемого исследования» для темы «немодерируемое тестирование интерфейса» ошибка искажает компонент «Открытые ответы»; рядом записывают последствие, обнаружение и исправление.
- Анализировать самооценку вместо действий. В артефакте «пакет немодерируемого исследования» для темы «немодерируемое тестирование интерфейса» ошибка искажает компонент «Контроль качества»; рядом записывают последствие, обнаружение и исправление.
Критерии качества
- Сценарий проходит без пояснений. В артефакте «пакет немодерируемого исследования» критерий темы «немодерируемое тестирование интерфейса» проверяют после шага «Выбрать подходящие вопросы»; рядом сохраняют результат и ответственного.
- Пилот выявляет технические риски. В артефакте «пакет немодерируемого исследования» критерий темы «немодерируемое тестирование интерфейса» проверяют после шага «Подготовить стабильный прототип»; рядом сохраняют результат и ответственного.
- Телеметрия связана с задачей. В артефакте «пакет немодерируемого исследования» критерий темы «немодерируемое тестирование интерфейса» проверяют после шага «Написать самостоятельный сценарий»; рядом сохраняют результат и ответственного.
- Согласие на запись получено. В артефакте «пакет немодерируемого исследования» критерий темы «немодерируемое тестирование интерфейса» проверяют после шага «Провести внутренний прогон»; рядом сохраняют результат и ответственного.
- Сбои отделены от поведения. В артефакте «пакет немодерируемого исследования» критерий темы «немодерируемое тестирование интерфейса» проверяют после шага «Запустить ограниченную волну»; рядом сохраняют результат и ответственного.
- Сегменты анализируются по плану. В артефакте «пакет немодерируемого исследования» критерий темы «немодерируемое тестирование интерфейса» проверяют после шага «Разделить данные»; рядом сохраняют результат и ответственного.
Ограничения применимости
- Причина ошибки часто остаётся неизвестной. Ограничение сужает вывод по теме «немодерируемое тестирование интерфейса» и требует повторно задать вопрос «Может ли участник понять задачу без помощи?»; границу решения сохраняют в артефакте «пакет немодерируемого исследования».
- Сложные профессиональные задачи трудно моделировать. Ограничение сужает вывод по теме «немодерируемое тестирование интерфейса» и требует повторно задать вопрос «Как обнаружить технический сбой?»; границу решения сохраняют в артефакте «пакет немодерируемого исследования».
- Доступность платформы ограничивает выборку. Ограничение сужает вывод по теме «немодерируемое тестирование интерфейса» и требует повторно задать вопрос «Какие данные нужны помимо завершения?»; границу решения сохраняют в артефакте «пакет немодерируемого исследования».
- Нет возможности поддержать участника. Ограничение сужает вывод по теме «немодерируемое тестирование интерфейса» и требует повторно задать вопрос «Не подменяет ли открытый ответ наблюдаемое поведение?»; границу решения сохраняют в артефакте «пакет немодерируемого исследования».
- Масштаб не компенсирует плохой сценарий. Ограничение сужает вывод по теме «немодерируемое тестирование интерфейса» и требует повторно задать вопрос «Может ли участник понять задачу без помощи?»; границу решения сохраняют в артефакте «пакет немодерируемого исследования».
Вывод
Для темы «немодерируемое тестирование интерфейса» команда связывает компонент «Скрининг» с этапом «Выбрать подходящие вопросы», проверяет критерий «сценарий проходит без пояснений» и учитывает ограничение «причина ошибки часто остаётся неизвестной». Артефакт «пакет немодерируемого исследования» сохраняет основания выбора и позволяет пересмотреть решение после новых наблюдений.
