Co-discovery как метод UX-исследований

13-го ноября в Москве прошёл Всемирный День Юзабилити — WUD'10 , на котором выступила и cпециалист Mail.Ru по UX-исследованиям с докладом о сo-discovery.

Сегодня мы хотим рассказать вам об этом методе исследования пользователей.

В последнее время в дополнение к юзабилити-тестированию часто используется метод think aloud, когда пользователя просят комментировать свои действия во время выполнения задачи.

Но, согласитесь, человеку такая модель поведения несвойственна: «Я сейчас поглажу рубашку, сначала обойду пуговку, потом правый рукав, и утюг должен хорошо разгладить его с первого раза…». Чтобы обойти этот недостаток, можно использовать метод co-discovery.

Суть метода co-discovery состоит в том, что задачу совместно решают два человека, попутно всё друг другу разъясняя. Один из них использует только мышку, другой только клавиатуру. При этом «тыкать в экран пальцем» нельзя.

Чтобы процесс коммуникации был комфортнее, в пары лучше всего объединять хорошо знакомых людей. Желательно, чтобы их модели мышления максимально отличались. Например, можно пригласить женщину и мужчину, технаря и гуманитария, людей разного возраста.

Мы решили опробовать этот метод, провели несколько пилотных тестов, а затем основной. Отобрали 5 пар респондентов (часть из них сотрудники Mail.Ru, не из IT-департамента) и поставили им серию разноплановых задач.

Какие преимущества метода co-discovery удалось выявить?

1. Естественное общение – респонденты прилагают усилия, чтобы вербализировать свой способ решения.
   Что можно выяснить:
   • Визуальное восприятие: вижу/не вижу (один респондент замечает одни части интерфейса, другой – другие части или не замечает совсем)
   • Понимание происходящего словами респондента
   • Ожидания («Где-то здесь можно было добавить открытку»)
   • Стратегию решения задачи («Давай в поиск по картинкам, там точно должно быть»)
   • Различия в моделях мышления двоих респондентов.
     — «Вводи адрес сайта!»,
     — «Может лучше через поиск?»
     
2. Респонденты с разными стратегиями объясняют их друг другу
   Что можно выяснить:
   
   • Как объясняют, какие термины они используют, какие зацепки (геометрическая фигура, цвет, сторона):
     «На синей на этой написано. Там же, где ты делала. Сверху, над белым полем. Синяя большая квадратина! Да нет!»
   • Реакция на объяснения
   • Где точка взаимопонимания
3. Выявить сложности удается быстрее – видны пути решения и проблемы сразу двоих респондентов
4. Нет ментора, который всё знает – модератор почти не участвует в процессе
5. Всем интересно, более расслабленная обстановка.

Найдены и возможные недостатки метода:

1. Может не покрывать часть проблем (поэтому не является заменой юзабилити-тестированию)
2. Не конструируется реальная среда (контекст решения задачи)
3. Человек не может полностью погрузиться в решение задачи, т.к. отвлекается на разъяснения
4. Сложнее делать количественные оценки
   
   • Number of errors – они подталкивают друг друга к методу решения задачи
   • Time-to-task – часть времени уходит на объяснения
5. Труднее проявлять свои личные интересы в момент решения задачи (выбрать фильм)
6. ± Один некоторое время доминирует: либо мужчина, либо человек с мышкой

На наш взгляд, метод co-discovery может быть удачно использован при тестировании:

• Массовых сервисов (поиск или почта);
• Сервисов, которые используются совместно (выбор фильма, планирование путешествия, покупка квартиры и техники);
• Когда важно понять восприятие и стратегии поведения пользователей;
• Когда важно понять язык, на котором думает пользователь.

Что почитать?

• J.Nielsen «Usability Engineering» p.198, Academic Press, 1993.
• Dumas and Redish, A Practical Guide to Usability Testing, Ablex Publishing. p. 31, «Co-discovery».
• Rubin, J. Handbook of Usability Testing. John Wiley & Sons. p. 240, «Testing two participants at a time.»
• Co-discovery Learning
• AMBUSH USABILITY (part 3) – Co-Discovery Method