Когда тестировать: полное и промежуточное тестирование

В своей книге «Usability Engineering» (Nielsen, 1993) Якоб Нильсен различает полное тестирование, когда тестируются завершенные продукты, и промежуточное тестирование, проводимое в ходе проек' тирования как часть итерационного процесса. Это важное различие.

Полное тестирование применяется для сравнения продуктов, для вы' явления проблем перед перепроектированием, для расследования при' чин возвратов продукта и определения источника запросов на обучение

и поддержку. Общие исследования, как правило, проводятся независи' мыми профессионалами и подробно документируются. В некоторых случаях, особенно при конкурентном анализе, общие исследования строятся таким образом, чтобы получить количественные данные, ко' торые можно проверить на статистическую значимость.

К сожалению, полное тестирование часто используется в составе про' цесса обеспечения качества – ближе к завершению разработки. В этот момент уже обычно слишком поздно вносить осмысленные изменения в проектные решения: поезд ушел. Оценку пользовательского интер' фейса следует проводить до того, как начнется создание кода (или, по крайней мере, достаточно рано, чтобы было время изменить реализа' цию сообразно внесенным дополнениям). Однако если требуется убе' дить заинтересованных лиц или программистов в том, что проблема юзабилити в имеющемся продукте явно присутствует, то ничто не за' менит наблюдения за реальными пользователями, сражающимися с программным продуктом.

Промежуточное тестирование предназначено как раз для этого. Эти быстрые качественные тесты проводятся в ходе проектирования, обычно на этапе детализации. Продуманное и контролируемое проме' жуточное тестирование открывает окно в разум пользователя, позво' ляя проектировщикам видеть, как их целевая аудитория реагирует на информацию и инструменты, предоставленные им для решения задач.

Хотя у полного тестирования, безусловно, есть своя область примене' ния, оно относится к сфере информационной поддержки планирова' ния жизненного цикла продукта. Оно позволяет проводить «антикри' зисные проверки» в ходе разработки, но потери в деньгах, времени, боевом духе команды могут на данном этапе дорого обойтись. Проме' жуточное тестирование проводится во благо проектирования в ходе процесса проектирования.

Проведение промежуточного юзабилити−тестирования

Существует много мнений относительно того, как правильно прово' дить юзабилити'тестирование и интерпретировать его результаты. К сожалению, мы обнаружили, что многие из подходов либо метят на место проектирования, либо имеют перекос в сторону количественных метрик и дают бесполезные данные вроде «времени выполнения зада' чи». Работа Кэролин Снайдер «Paper Prototyping» (Snyder, 2003) – хо' роший справочник по методам юзабилити'тестирования, причем, как мы убедились, совместимый с методами целеориентированного проек' тирования. В ней описаны не все методы тестирования и не затронуты отношения между тестированием и проектированием, но достаточно подробно рассмотрены основы и даются некоторые относительно про' стые методики для юзабилити'тестирования.

Вот вкратце важные составляющие успешного промежуточного юза' билити'тестирования:

• Проводите тестирование достаточно поздно, когда уже существует конкретное решение проектирования, но и достаточно рано, чтобы можно было успеть скорректировать проект и реализацию.

• Тестируйте задачи и аспекты опыта пользователя, связанные с кон' кретным продуктом.

• Набирайте участников из аудитории целевых пользователей, ис' пользуя персонажей в качестве фильтра.

• Четко ставьте перед участниками задачи и просите при их решении размышлять вслух.

• Дайте участникам возможность напрямую взаимодействовать с низ' котехнологичным прототипом (исключением являются случаи, ко' гда тестируется специализированное оборудование, а бумажный прототип не способен отразить нюансы взаимодействия).

• Управляйте ходом сеансов, чтобы выявить проблемы и изучить причины их возникновения.

• Минимизируйте предвзятость, введя в эксперимент модератора, который ранее не принимал участия в проекте.

• Сосредоточьтесь на поведении и образе мысли участников.

• По завершении тестов проведите разбор (дебрифинг) вместе с на' блюдателями, чтобы выявить причины наблюдавшихся проблем.

• Вовлекайте в процесс исследования проектировщиков.

Вовлеченность проектировщика в юзабилити−исследования

Недопонимание между проектировщиком и пользователем – распро' страненная причина проблем юзабилити. Персонажи помогают проек' тировщикам понять цели пользователей, их потребности и их точку зрения, формируя фундамент эффективных коммуникаций. Юзаби' лити'исследование, открывая дополнительное окно в мышление поль' зователя, позволяет проектировщикам увидеть, как доносятся их вер' бальные, визуальные и поведенческие решения, узнать намерения пользователей при взаимодействии со спроектированными ожидаемы' ми назначениями.

Проектировщики (или, говоря шире, люди, принимающие решения по проектированию) – основные потребители результатов юзабилити' исследований. Редкие проектировщики способны модерировать сеанс тестирования, сохраняя нейтралитет, однако их вовлечение в плани' рование исследований и прямое наблюдение за сеансами тестирова' ния, а также участие в анализе и решении проблем крайне важно для

успеха исследования. Мы обнаружили, что проектировщиков важно привлекать к следующим видам деятельности:

• Планирование исследований – для формулирования важных с точ' ки зрения проектирования вопросов

• Определение критериев отбора участников с помощью персонажей и их атрибутов

• Использование сценариев для выбора тестовых задач

• Наблюдение за сеансами тестирования

• Совместный анализ результатов исследований

II