В середине 2024 года я стал соруководителем рабочей группы экспертов-исследователей, занимающихся тестированием доступности с участием людей с когнитивными нарушениями. Это было частью моей работы в Fable, где я занимаю должность вице-президента по инновациям.

Когнитивное нарушение — это широкий термин, охватывающий состояния, влияющие на обработку информации человеком, как правило, затрагивающие память, концентрацию или способность к обучению. По данным CDC, 13,9% населения США живут с когнитивными нарушениями, а исследование Йельского университета подтверждает, что этот показатель быстро растет.

Наша группа поставила четыре цели: научиться набирать и отбирать участников; определить лучшие практики для исследований с когнитивно разнообразными пользователями; протестировать эти методы в реальном исследовании; и задокументировать все, чтобы другие могли извлечь пользу.

Мы разработали скрининг, в котором просили людей самостоятельно определить, сталкиваются ли они с проблемами памяти, концентрации или обучения. Затем мы изучили опубликованные академические исследования с участием когнитивных тестировщиков, чтобы собрать первоначальные лучшие практики.

Далее последовало пилотное исследование с 25 тестировщиками. Мы итеративно дорабатывали наш подход и подготовили два результата: руководство по проведению интервью с пользователями с когнитивными особенностями и опрос для количественной оценки их опыта взаимодействия с цифровыми продуктами. После этого пилота у меня возникло подозрение, что эта группа выявит больше инсайтов по юзабилити, чем участники из общей популяции, с которыми я работал раньше. Я решил проверить это предположение.

Исследование когнитивного юзабилити

Я объединился с Калифорнийским университетом в Ирвайне — конкретно с Саедом Фатиулом Хуком — и исследователями Fable Пранавом Пидхаталой, Али Браун и Майклом Фэганом для проведения совместного исследования. Мы создали три веб-сайта с помощью ИИ-инструмента для прототипирования, каждый с разной целью, дизайном и набором контента, чтобы обеспечить разнообразие задач.

Веб-сайтStrong SnacksTurning PagesCrown & Comb
ОписаниеСайт с рецептами высокобелковых закусок из трех ингредиентов. Рецепты можно фильтровать по категориям (веганские, для наращивания мышечной массы и т.д.). Включает блоги о белке и контактную информацию.Сайт книжного магазина с курируемым каталогом. Предлагает фильтрацию по жанрам, функцию «свайпа» книг для создания профиля предпочтений, пользовательские списки книг, корзину и оформление заказа.Сайт парикмахерской, позволяющий записываться на стрижки и консультации онлайн. Включает VIP-программу и специальные пакеты услуг.
ДизайнПростой, бруталистский, яркий, с большим количеством изображений.Атмосферный, классический, темный, много фотографий обложек книг.Смелый, чистый, черно-белый с яркими акцентами.
КонтентРецепты, посты в блоге.Книги и списки книг.Услуги, гид по опыту, информация о членстве.
Ключевая функциональностьФильтр по категориям, подписка на новости.Корзина, подбор книг, списки книг, рекомендации.Запись на прием.
ЗадачиНайти рецепт высокобелковой закуски; прочитать блог о белке; узнать, как получать уведомления о новом контенте.Найти и использовать функцию «свайпа» для 10 книг; найти рекомендованный список книг; добавить книги из двух жанров в корзину; завершить оформление заказа.Найти цены на стрижки; записаться на стрижку; найти цену на свадебный пакет.

Мы использовали тот же скрининг — вопросы о памяти, концентрации и обучении — и разделили участников на две группы: те, кто самостоятельно отметил у себя когнитивные трудности, и те, кто их не отметил. Помните, когнитивное нарушение включает нейроотличия. Нейроотличные — это общий термин для людей, чей мозг обрабатывает информацию и учится иначе; он часто ассоциируется с трудностями в обучении (например, дислексия), СДВГ и аутизмом.

Мы провели 30 интервью с пользователями — по 10 на каждый сайт — с равным разделением 5/5 между когнитивными участниками и участниками из общей популяции для каждого сайта. В каждом сеансе участник выполнял все задачи для одного сайта во время онлайн-интервью под руководством модератора-исследователя.

В конце каждого сеанса каждый участник заполнял Шкалу доступного юзабилити (AUS) — бесплатный опрос из 10 вопросов, распространяемый по лицензии Creative Commons, который оценивает юзабилити веб-сайтов и мобильных приложений.

Подход к анализу данных

Я просмотрел все записи и расшифровки, отмечая каждый раз, когда участник высказывал опасение, выражал замешательство или спрашивал, как что-то работает. Я учитывал все это как проблемы. Я также отмечал, когда участник пропускал элемент задачи — даже если он сам этого не замечал — и записывал каждое предложение по улучшению.

Примеры найденных проблем:

  • «Фото слишком высокое, и приходится много скроллить, чтобы добраться до контента». (отмечено участником)
  • «Я не получаю никакой обратной связи, когда ставлю лайк или дизлайк книге». (отмечено участником)
  • Участник пропустил обязательный флажок «Абонентский ящик» в первый раз. (отмечено исследователем)

Примеры предложений:

  • «Я бы хотел видеть сравнение белка в виде таблицы».
  • «Вкладку „Больше информации“ нужно переместить выше».
  • «Я бы хотел получить больше информации о том, как создается список рекомендаций».

Каждая проблема или предложение учитывались только один раз для каждого участника, даже если они повторяли одну и ту же мысль.