1.5 Подготовка тестовой группы

Ваша тестовая группа – это группа пользователей, которые примут участие в данном тесте. Сколько вам потребуется человек? Наиболее распространённые руководства рекомендуют привлекать в среднем 4-5 участников для того, чтобы обнаружить большинство проблем, связанных с юзабилити. Подберите вашу тестовую группу на основе ваших задач и профиля пользователей, учитывая доступность участников в дни, на которые вы назначили проведение теста.

Вероятнее всего, уже первые три пользователя помогут выявить все самые значительные проблемы. Якоб Нильсен и Том Ландауэр утверждают, что тестирование пяти пользователей позволяет обнаружить уже как минимум 85% проблем интерфейса, и далее с каждым дополнительным пользователем отдача от тестирования существенно снижается. К тому же, намного важнее провести больше циклов тестирования, чем стремиться собрать всю возможную информацию из каждого цикла. Тестирование в цикле только трех пользователей, скорее всего, позволит вам провести хотя бы еще один цикл. Кроме того, после корректировки проблем, обнаруженных в первом цикле, те же самые пользователи, приглашенные на следующий цикл, возможно, обнаружат другие проблемы, поскольку застревать на исправленных они уже не будут.

Если вы тестируете только трех или четырех пользователей, то вы можете обсудить полученные результаты в тот же день и сразу сделать нужные изменения. Если же в вашем тестировании участвует более четырех пользователей, то объем заметок, сделанных в процессе тестирования, становится слишком большим, чтобы их можно было быстро прочитать. К тому же, большинство из этих заметок будет касаться мелких проблем, возникнет опасность потерять главное. Так что постарайтесь сосредоточиться на главных проблемах, корректируйте их, и затем как можно скорее тестируйте снова.

2 Проведение тестирования

2.1 Подготовка участника к тестированию

Большинство людей чувствуют себя неуютно, когда попадают в лабораторию, где им приходится выполнять задания, зная, что время выполнения замеряется и все их ошибки записываются для дальнейшего анализа, поэтому сделать так, чтобы пользователь чувствовал себя комфортно и спокойно, очень сложно. Объясните участнику, что он может в любой момент остановить тест, отлучиться в уборную или сделать перерыв, если это ему потребуется. Подчеркните, что вы подвергаете тестированию продукт, а не пользователей, и им не стоит чувствовать себя под давлением теста. Поблагодарите пользователей за участие в тестах.

Большинство тестов требуют от участников предварительного заключения соглашения о неразглашении информации и подтверждения их согласия на произведение записей. В качестве части этой «бумажной работы», вы можете провести участников через анкетирование для того, чтобы идентифицировать знание предметной области, их позиции и отношения, или чтобы получить ещё немного информации о характеристиках пользователей.

2.2 Действия ассистента во время тестирования

Задача ассистента заключается только в том, чтобы объяснить пользователям, что им нужно сделать, просить их высказывать свои мысли вслух, слушать внимательно, что они говорят, и всячески оберегать их.

Попробуйте, сначала протестировать себя.

За день до проведения теста попробуйте выполнить самостоятельно то, что собираетесь просить делать участников тестирования, и убедитесь, что сможете справиться в отведенное время.

Оберегайте участников тестирования.

В ваши обязанности входит защита чувства собственного достоинства пользователей. Будьте внимательны и тактичны с ними. Если пользователь застрял где-то, ободрите его, похлопайте его по плечу (в переносном смысле), а в завершении тестирования обязательно поблагодарите (искренне). Дайте знать вашим пользователям, что их участие было очень ценным и полезным для вас.

Сопереживайте участникам тестирования.

Будьте добры и терпеливы к ним и старайтесь ободрять их. Дайте им ясно понять, что вы знаете, что они не глупы.

Постарайтесь увидеть и понять, какие мысли возникают у них.

Самая главная задача для вас - это попытаться наблюдать за ходом их мысли. Когда вы не уверены, что вам понятно, о чем они думают, спросите у них об этом. Если пользователь уставился на экран в течение 10 сек., то спросите у него: «На что вы смотрите?» или «О чем вы задумались?».

Постарайтесь понять, какие на каждом шагу у них возникают ожидания и насколько программа соответствует этим ожиданиям. Когда пользователь уже готов щелкнуть мышью, спросите у него, что он ожидает увидеть. После того как он щелкнет мышью, узнайте, действительно ли результат оправдал его ожидание.

Не подсказывайте им, что делать.

Во многом это напоминает работу психиатра. Если пользователь говорит: «Я не знаю, что делать дальше», вам нужно спросить: «А как вы думаете, что бы вы могли сделать?» или «А что бы вы сделали, если бы были дома?».

Ваши инструкции должны быть простыми.

Их не так уж и много, поэтому их легко запомнить:

Оглядите экран и скажите, чем это все является и по чему вы, скорее всего, щелкнули бы? Скажите, по чему вы щелкнули бы теперь, и как вы думаете, что вы увидите после этого? Постарайтесь как можно больше произносить свои мысли вслух.

Не бойтесь повторять эти инструкции часто, тем более что это больше надоест вам самим, чем пользователю.

Уточняйте, уточняйте, уточняйте.

Трудность состоит в том, что нельзя отвлекать пользователей или оказывать на них влияния, но в то же время необходимо выяснить, что они в действительности думают (чего, кстати, они и сами могут не до конца понимать).

Не бойтесь импровизировать.

Например, если первые два пользователя безнадежно застряли в одном и том же месте и вам ясно, в чем там проблема и как ее решить, то не заставляйте и третьего пользователя без нужды возиться с ней. Как только он дойдет до этого места, объясните ему, что к чему и как продолжить работу дальше.

Не расстраивайтесь, если пользователь окажется совсем неопытным или полностью запутается.

Наблюдая за пользователем, который ни во что не «въезжает», вы можете узнать больше полезного. Более опытный пользователь обладает лучшими навыками для того, чтобы разобраться с проблемой «как получится», и вы можете даже не заметить, что на самом деле он не понимает, как «это» работает.

Делайте записи после каждой сессии.

Сразу после каждого тестирования делайте короткие записи о том, что вам запомнилось. Если вы не сделаете этого до начала следующего теста, то потом вам будет очень трудно вспомнить важные детали.