нужна помощь в его настройке. Кроме того, приложение, обеспечивающее совместное использования экрана, может мешать тестированию, например внося путаницу в действия пользователей или искажая размеры элементов дизайна продукта. Помехами могут стать также плохое качество связи, приводящее к задержкам отображения на вашем экране действий пользователя, и использование брандмауэров. Однако, если не принимать во внимание возможные технические трудности, дистанционное тестирование с модерацией может снабдить вас большим объемом ценной информации от пользователей.
Третий способ – немодерируемое дистанционное тестирование – проводится с помощью таких сервисов, как UserTesting или Validately. Они позволяют обеспечить доступ клиентов к артефактам проектирования и фиксируют их действия. Многие из таких сервисов, помимо технического решения, готовы предложить услуги по формированию группы пользователей для участия в тестировании вашего продукта. Одним из преимуществ такого подхода является более быстрое получение результатов: вам не приходится тратить время на поиски и сборы пользователей; несколько участников могут проходить тестирование одновременно, не будучи зависимы от доступности модератора. Однако в этом случае вы не находитесь рядом, а значит, не можете наблюдать за пользователем по ходу выполнения теста. Поскольку в этом случае пользователь следует письменным инструкциям, вам приходится тратить больше времени на разработку процесса тестирования и подробных указаний по прохождению его этапов. В таких случаях рекомендуется провести пилотный тест с одним или двумя участниками, прежде чем запускать тестирование на большой группе пользователей. Кроме того, отсутствие модератора означает, что он не сможет задавать попутные вопросы типа «А почему вы нажали эту кнопку?». Вы должны заранее подготовить полный список вопросов, на которые хотели бы получить ответы, из-за чего придется уделить большее внимание их формулировкам по сравнению с модерируемым вариантом тестирования.
Функционал большинства инструментов, применяемых при проведении немодерируемого дистанционного тестирования, ограничивается записью происходящего на экране пользователя с фиксацией движений мыши и нажатий клавиш. При том что запись с экрана пользователя, безусловно, полезна для исследования, прослушивание исходящего от пользователя голосового сопровождения существенно увеличивает ценность полученного материала. Некоторые инструменты позволяют делать в том числе видеозапись лица пользователя. Другие специализированные приложения вовсе не делают никаких видеозаписей (даже экрана), а просто фиксируют нажатия клавиш и рассчитывают процент «кликабельности». Такого рода количественная информация тоже будет полезна для последующего анализа, но, когда ваша цель состоит в тестировании продукта на соответствие рынку без присутствия модератора, весьма желательно получить как запись экрана, так и аудиозапись комментариев пользователя. Большинство современных приложений для дистанционного тестирования предоставляют такие возможности.
Одним из преимуществ немодерируемого тестирования является отсутствие риска влияния модератора на результаты. Действительно, в этом случае клиенты оценивают продукт на основании полностью самостоятельного его использования – то есть в условиях, максимально приближенных к реальной ситуации. Замечено, что большинство участников тестирования в присутствии модератора проявляют большее усердие при выполнении тестов.
Итак, какой же метод тестирования вы должны выбрать? Когда вы только начинаете проверку своего MVP, модерируемое тестирование будет лучшим выбором, поскольку оно позволяет задавать вопросы и получать исчерпывающие отзывы от пользователей. Как я уже подчеркивал, очное тестирование подходит идеально, если удается собрать целевых пользователей. В противном случае на этом этапе следует использовать дистанционное модерируемое тестирование. Когда вы продвинетесь дальше и почувствуете большую уверенность в своем MVP, немодерируемое тестирование может стать полезным инструментом в дополнение к модерируемому, поскольку оно занимает меньше времени и обходится дешевле. По этим же причинам немодерируемое тестирование является хорошим вариантом, если у вас нет ресурсов для проведения тестов с участием модератора.
Как отобрать для тестирования целевых потребителей
Конечно, вы хотите быть уверены в том, что пользователи, на которых вы тестируете свой продукт, являются представителями целевой аудитории. В противном случае полученная обратная связь может вас дезориентировать. Для отбора участников тестирования используют скрининг – некое подобие анкеты, набор вопросов, которые вы задаете кандидатам. Например, если для вашего исследования требуются мнения молодых мужчин, при отборе вы будете задавать вопросы о возрасте и поле. При этом для каждого вопроса вы подготавливаете несколько вариантов ответов и решаете, какие из них указывают на соответствие респондента вашим требованиям, а какие исключают его из числа представителей целевой аудитории. В Главе 3 обсуждались различные типы атрибутов, которые могут использоваться для идентификации целевого потребителя.
Как правило, в дополнение к демографическим поведенческие атрибуты имеют не менее важное значение. Например, если вам для тестирования требуются заядлые любители видеоигр, логично было бы спрашивать респондентов: «Играете ли вы в видеоигры?» – отфильтровывая тех, кто выбрал ответ «нет». Затем вы могли бы спросить ответивших «да»: «Сколько часов в неделю вы обычно играете в видеоигры?» При этом респондентам предлагалось бы сделать выбор из списка возможных вариантов ответов. Например таких: «менее пяти часов в неделю», «от 5 до 10 часов в неделю», «от 10 до 20 часов в неделю», «от 20 до 30 часов в неделю» и, наконец, «более 30 часов в неделю». Вы можете решить для себя, что геймерами вы признаете тех, кто играет не менее 20 часов в неделю. Соответственно, в список участников вашего тестирования попадут только те, кто выбрал какой-то из двух последних вариантов ответа.
Психографические атрибуты – мнения и чувства пользователей – также могут быть полезны для скрининга. При отборе все той же целевой аудитории одним из возможных психографических вопросов мог бы быть такой: «Считаете ли вы себя заядлым геймером?» Или вы могли бы спросить: «Насколько вам нравится играть в видеоигры?» – и предложить цифровую шкалу для ответа.
При подготовке вопросов для отбора участников тестирования следует опираться на заранее созданных вами персонажей представителей целевой аудитории. Как и в других рассматриваемых аспектах, вопросы для отбора являются гипотезами, которые подлежат проверке и итеративному уточнению. Если при проведении первого раунда тестов вы заметили, что используемый набор проверочных вопросов не позволил привлечь для тестирования целевых клиентов, необходимо соответствующим образом изменить список вопросов для отбора участников следующего раунда тестов.
Часто после первых тестов вы обнаруживаете дополнительные критерии для добавления в свой скринер. Например, предположим, что у нас есть приложение для управления портфелем ценных бумаг, ориентированное на инвесторов. Тогда первый фильтр может состоять из вопросов о частоте сделок и стоимости инвестиционного портфеля респондента. Однако по итогам первого раунда тестирования мы обнаружили, что существует два различных типа инвесторов: те, которые предпочитают самостоятельно принимать инвестиционные решения, и те, кто не прочь делегировать эту задачу профессиональному консультанту. Наше ценностное предложение находит отклик у первой группы, но совершенно не привлекательно для второй группы. В таком случае для отбора участников последующих раундов тестирования будет
