3. Если это возможно, позвольте тестировщикам использовать их собственные телефоны и планшеты, с которыми они хорошо знакомы — так вы увидите наиболее естественное взаимодействие.

Совет раньше был хорош, но теряет в актуальности: все продукты на iOS и Windows Phone совершенно одинаковы. Для Android совет все ещё верен, но примерно через год тоже устареет с нормализацией платформы.

6. Притушите дисплеи устройств — запись картинки с маленьких светящихся экранов с меняющимся уровнем яркости может быть настоящей проблемой для low-end камер. Обеспечьте ровный фон для съемки, бледные поверхности не слишком годятся.

Для всех платформ, кроме Samsung Bada, можно уже обойтись без записи экрана внешней камерой. Раньше совет был актуален, но сейчас более-менее бесполезен — запись экрана через VNC во всех отношениях лучше. По этой же причине потеряли всякую актуальность также и пункты 7 и 8. Появление VNC на телефонах, на самом деле, чрезвычайно крутая вещь. Пять лет назад, когда мы сделали свою первую камеру на телефон — http://usethics.ru/blog/lib/mobile_video/ — мы были чрезвычайно собой горды. А сейчас я затрудняюсь уже вспомнить, когда в последний раз мы ее использовали.

В целом, конечно, сами советы правильные, НО:

1. Не понравилось, как смело кидаются фразы «Чтобы узнать все о собственном приложении или мобильном веб-сайте, нужно сделать всего лишь одну вещь — РАССЛАБИТЬСЯ. Расслабленный тестировщик должен находиться в спокойной обстановке и не пытаться вести себя так, как при испытании обычного сайта.» Можно подумать, что при тестировании сайта респондент должен быть напряженным и в неестественной обстановке. Половина советов как минимум также актуальна и для тестирования сайтов, но, очевидно, у автора не очень много опыта в этой области.
    
2. Кроме того, эти 12 советов из области тех, которые имеют смысл, если по всем остальным аспектам тестирования (при чем фундаментальным) тестирующие — профи. Расслабление и правильный свет вряд ли помогут тестированию, если скажем, интервьювер не умеет правильно задать вопрос или поставить задачу респонденту.

То есть с одной стороны статья вроде как для тех, кто итак много знает и умеет в области тестирования приложений, с другой стороны, для того, кто много знает и умеет в этой области вряд ли эти советы будут новыми и полезными.

А так, конечно, все правильно написано :-).
 

Перед сеансом тестирования заряжайте батарейки на всех устройствах. Очень обидно, когда планшет или телефон участника «сдыхает» посередине сеанса, а то и в самом начале. Полезно также держать под рукой набор зарядных устройств, подходящих к смартфонам/планшетам участников, если они пришли со своими устройствами.

При тестировании продуктов для мобильных устройств очень важно погрузить пользователя в типичную среду и контекст использования.

Тестирование должно проходить максимально близко к боевым условиям — поэтому не экономьте время и не поленитесь проехать с респондентом в кафе и уже там, за дружеской беседой, предложите установить и воспользоваться приложением.

Никто не любит, когда за ним наблюдают — большое зеркало, провода, камеры, прикрученные к устройству, одновременно и смазывают результаты эксперимента и стесняют пользователя. На первом этапе можно снимать только руки и лицо пользователя — этого будет вполне достаточно, при этом лучше, чтобы в момент использования приложения пользователь не знал, что его снимают. Просто раскиньтесь на диванчике напротив со своим мобильным устройством и незаметно включите запись, делая вид, что открываете то же самое приложение. Именно поэтому лучше посадить респондента на стул, а самому сесть напротив на более мягкое и низкое место.

Перед проведением исследования необходимо подготовить ряд вопросов и заданий, однако задавать их нужно не в строго определенном, заданном наперед порядке, а в рамках беседы, которая может пойти по различным сценариям. Будьте готовы импровизировать.

Если повезет — можно отснять не только эмоции пользователя, но и сам экран приложения — для этого можно 2-3 раза отрываться со своего места и вставать рядом с респондентом (чуть за спиной), как бы помогая ему в решении задач («Так, давай ка посмотрим, что тут у тебя...»). Не стоит, конечно, ожидать картинки хорошего качества из-за слишком яркого экрана, но положение и движение пальцев будет видно — а этого вполне достаточно, ведь вы знаете свое приложение наизусть, не так ли :-)?

В данной статье отражён один из способов тестирования юзабилити мобильной версии сайта и нативного мобильного приложения. Цель подобного тестирования всегда одна — узнать, на сколько удобен и понятен интерфейс того или иного продукта.

Всегда очень полезно проводить тестирование конечного продукта на разных группах пользователей: и на опытных, и на новичках. Это позволяет лучше выявить все его недостатки до финального релиза. Чем больше человек будет вовлечено в тестирование — тем лучше.

Однако по личному опыту могу сказать, что это скорее идеальная, нежели реальная ситуация. Зачастую данный этап пропускается, и продукт тестируется внутри компании самими разработчиками и заказчиком, а дальше выпускается в свет. Если не закладывать в проекте время непосредственно на тестирование юзабилити — это может сыграть злую шутку в дальнейшем: то, что удобно и понятно разработчикам не означает, что это понятно и удобно целевому пользователю.

На мой взгляд, 5-ый пункт несколько излишен. В настоящее время все приложения на смартфоны и планшеты ставятся через специализированный маркет (для Android — Google Play Market, для iOS — App Store, и т. д.). Процесс установки достаточно стандартный и не требует от пользователя каких-то особых взаимодействий. Нам важно видеть, как человек пользуется приложением, а не как работает стандартный установщик конкретной OS. На мой взгляд, более важным вопросом является: как пользователь найдёт наш продукт на маркете среди всего многообразия приложений?

Но в общем и целом, описанный в статье подход к тестированию мобильного продукта вполне имеет право на жизнь.

1. Крайне важно, кого вы выберете в качестве участников тестирования. Это должны быть либо реальные, либо потенциальные пользователи данного приложения. Например, на мне бесполезно исследовать приложение для игры в покер, я не играю и играть не планирую.
    
2. Если собираетесь тестировать без камеры, тогда продумайте, как будете наблюдать за процессом. Возможно, ваше близкое горячее дыхание будет смущать участника теста.
    
3. Также продумайте способ фиксации найденных проблем. Если камеры не будет, то, возможно, записывая в блокнот, вы пропустите нечто важное
    
4. Если будете проводить пост-опрос на тему: «Ну, как это было?». Учтите, что люди часто смягчают реальное впечатление (бывает наоборот). Так что ориентируйтесь больше на то, что увидели сами (не только ошибки, но и эмоции), чем на то, что скажут участники теста после.
    
5. Постарайтесь не влиять на поведение участника теста. Наблюдала, как разработчик приложения вздыхал и фыркал в процессе тестирования Не показывайте свои эмоции, ведь пользователь всегда прав.
    
6. Желаю всем интересных открытий!

Советы даны полезные. Впрочем, первые сессии тестирования обязательно добавят нюансы и вопросы к любым теоретическим данным.

Я бы еще обратила внимание на следующие моменты:

Важно помнить о том, как и когда в реальной жизни используется ваше приложение. Например, если его обычно открывают на ходу или в метро (стоя и держась одной рукой за поручень, а вокруг весьма шумно), нет смысла тестировать его, сидя в комфортной обстановке — вы не сможете увидеть ключевые проблемы. В этом случае, лучше забыть про камеры и прогуляться/покататься на метро вместе с респондентом, в процессе тестируя приложение.

Полезно не давать пользователям четких заданий, а просто кратко представить продукт и дать возможность поработать с программой так, как хочется. Вы сможете узнать, как люди понимают назначение вашего приложения, какие вопросы у них возникают, что им хочется сделать в первую очередь. Если удалось завоевать доверие респондента, можно сделать второй шаг и расспросить его о привычных программах или даже посмотреть, как он работает с приложениями конкурентов.

Постарайтесь обеспечить приватность и не пускать других людей в комнату во время тестирования — участнику теста будет гораздо комфортнее и спокойнее.

И про видеозапись:

• Если вы все же будет записывать экран и пользователя, камеры ставьте с самого начала, чтобы человек успел привыкнуть к ним хоть немного.
• Для фиксации жестов и способа работы с телефоном/планшетом, камеру лучше разместить сбоку так, чтобы она не бросалась в глаза. Кстати, не забудьте спросить разрешение на съемку.
• Если у вас нет возможности записать экран и руки пользователя, постарайтесь сесть так, чтобы видеть происходящее на экране — догадки о том, что респондент выбирает, и, как пытается работать с приложением, бесполезны.

А вообще, мы давно мечтаем о мобильных приложениях, записывающих экран телефона без всяких лишних видеокамер. Думаю, они скоро появятся и сильно упростят задачу тем, кому важно проанализировать свой мобильный продукт.

Главный посыл статьи достаточно спорен. Не для всякого теста мобильного приложения подходит именно расслабленная обстановка. Все зависит от реального контекста использования. Например, казуальную игру можно тестировать за кофейным столиком. Если же речь идет о приложении-навигаторе, которым люди пользуются одной рукой и за рулем, то такая обстановка будет не лучше, чем обычная лаборатория.

Очень дельное предложение — позволять тестировщикам использовать собственные устройства. Но будьте готовы к тому, что некоторым людям придется помогать с установкой приложений или настройкой интернета. Часто с такими задачами помогают родственники или друзья.

Предложение половину респондентов попросить установить приложение, а половине дать готовое, тоже интересно. Но не всегда опыт установки сделает пользователей опытными. Только если в программе есть «обучалка». Но от этой идеи не стоит отказываться. Вы сможете посмотреть, на что обращают внимание люди при чтении описания приложения и проверите доступность и расстановку акцентов в своих рекламных материалах.

Ну и наконец, да, очень важно наблюдать за пользователем в целом, но если у вас не будет возможности видеть экран приложения, вы мало что сможете понять о том, что происходит: где именно он применил этот жест, куда он не может попасть пальцем, и т.д. В идеале ваша камера должна висеть так, чтобы снимать и руки респондента, и сам экран.