Про исследования и проектирование умных человекоцентричных систем

Позднее Ctrl + ↑

График от QuantUX-ресерчера, который повлиял на стратегию YouTube

История из бородатого 2010 года, в которой общими мазками описывают как взяли кучу данных поведения пользователей на сайте, систематизировали их и отобразили визуально. И этот визуал стал настолько виральным внутри компании, что с ним печатали футболки и никому в YouTube не удалось увернуться от выводов, которые прилагались к графику.

Герой этой истории был первым квант-ресерчером, затем переквалифицировался в dataviz-инженера и вернулся обратно в ресерч. Попутно родился вот такой чудесный темплейт для рисования sunburst-диаграмм.

https://observablehq.com/@kerryrodden/sequences-sunburst

Я таких историй прочитал много, но что важно:

  • персонализированные продукты генерируют большой объем разнообразных паттернов
  • с каждый годом персонализации в продуктах все больше и больше
  • чтобы емко и понятно отобразить результаты исследования их надо не только систематизировать и упростить, но и эффективно отобразить.

Поэтому подчеркиваю важность dataviz-скиллов и в целом навыки презентации своей работы. Современные персонализированные продукты, которые оперируют в разных странах, на разных платформах и для разных сегментов аудитории почти невозможно объяснить «простыми, понятными» и неэффективными инструментыми коммуникации.

Тренд на усложнение инструментов аналитики виден и в других частях продуктовой работы.
Вспомним, как постепенно индустрия отходит от воронок и чаще начинает оперировать траекториями путей пользователя, а линейные деревья метрик уступают места каузальным графам со сложными неявными связями между метриками. А это требует новых методов обработки информации (напр. сетевой анализ) и их отображения (напр. знания по укладки графов или изучение/создание новых моделей визуализаций).

UX-помехи как инструмент сбора сигнала для алгоритмов

Ключевые идеи из статьи Using Friction As A Feature In Machine Learning Algorithms, дополненные небольшими фатками автора из личного опыта.

NB! Слово «friction» в переводе с английского означает «трение» или «разногласие», что не совсем подходит в контексте пользовательского опыта. Поэтому далее по тексту я буду переводить «friction» как «помеху», т. к. счел это более подходящим вариантом. Теперь про идеи из статьи...

1. Иногда нужно локально усложнять пользовательский опыт, чтобы упростить его в целом

Популярные цифровые продукты оттачивают ключевые сценарии до состояния «действий в один клик (или вообще без него)». Есть даже известная в дизайн-сообществе книга на тему. Но как и любая механика бездумно доведенная до крайности, она может привести к нежеланным для бизнеса и/или пользователя последствиям.

Поэтому иногда проектироващики осознанно вставляют юзерам палки в колеса:

  1. Заставлять настраивать и/или собирать доп.инфу перед начало использования приложения (ох уж эти любимые N экранов в первой сессии, которые большинство людей пролистывают не глядя...)
  2. Подталкивать к определенным действиям при помощи механик из поведенческой экономики (интересующиеся могут поискать Nudge Theory)
  3. «Защита от дурака» при критический действиях (напр., удаление данных)
Модальное окно, которое заставляет задуматься и напрячься, чтобы реально удалить учетную запись

2. UX-помехи позволяют отделять «сигнал» от «шума» и повышать качество рекомендаций

Для работы рекомендательных алгоритмов, продукт должен собирать сигналы от пользователя, обрабатывать их, а результат обратно отображать у пользователя. Думаю, если вы пришли в этот блог, то знаете это и без меня. Но на всякий случай прикладываю схему, которую сделал автор оригинального поста:

Цикл обратной связи типичного сервиса с движком рекомендаций

В свое время Tinder ввел дизайн карточек, который фокусирует человека на одном профиле за раз и механику свайпов, которая явным образом собирала оценку от пользователя.

TikTok взял эту механику на вооружение и довел до совершенства для своих целей — быстрее подстроиться под вкусы пользователя и затянуть в продукт. Но как это сработало?

TikTok не стал использовать «традиционный» дизайн в виде витрины контента, который:

  • позволяет широким взглядом охватить имеющийся каталог, но...
  • мешает алгоритму недвусмысленно понимать что захватывает внимание пользователя, а что нет

Получается, что эта механика ухудшила один аспект опыта (человек видит меньше контента за раз), но позволила быстрее подстраивать ленту и улучшить опыт взаимодействия с сервисом в целом.

А еще, у TikTok в первой сессии нет привычного онбординга из нескольких экранов, где можно настроить приложение. Настройка происходит по мере скролла ленты, что сокращает время до получения ценности от продукта.

В марте 2023 музыкальный сервис Spotify выкатил редизайн своего продукта, в котором показал ленту а-ля TikTok. Верховный продуктолог и по совместительству глав.инженер сервиса, обстоятельно объяснил в интервью почему они радикально меняют интерфейс.

“Секрет того, почему некоторые из продуктов так хороши в рекомендациях, на самом деле заключается не в том, что у них лучшие алгоритмы. Это те же самые алгоритмы с более эффективным пользовательским интерфейсом”.
— Густав Седерстрем в статье The Verge “Почему Spotify хочет выглядеть как TikTok”

Интересно, что их редизайн собирает хейт по интернету. Например, Mashable назвал новый интерфейс Spotify одним из худших обновлений 2023 года. Но руководство музыкального сервиса готово мириться с критикой, т. к. в долгосроке верит в правильность своего решения.

So What?

В статье есть еще несколько рассуждений про потенциальное использование этой механики в будущем и в других ML-продуктах. Не обошлось и без упоминания модных нынче языковых моделей. И есть несколько советов как искать «полезные помехи», но они как-будто слишком абстрактные.

В целом, метериал годный и содержит ряд полезных релевантных ссылок. Не зря потратил 15 минут на чтение. Можно ссылаться на него при рабочей необходимости.

Пользователи чаще ищут немейнстримные новости, если видят «линию партии»

Вот что нам говорит свежая заметка из журнала Nature:

People, not search-engine algorithms, choose unreliable or partisan news. Analysis of people’s web searches & visited websites suggests that it is more likely that they are choosing to engage with partisan or unreliable news than that they are being unduly exposed to it by search-engine algorithms.

So What?
Стоит задуматься: а так ли силен эффект «пузыря фильтров» в новостных рекомендациях?

Полный текст научной работы: Users choose to engage with more partisan news than they are exposed to on Google Search.

Рекомендации в разных странах и культурах

Информация воспринимается и интерпретируется человекам исходя из убеждений, ценностей и поведения. Эти характеристики формируются в личности под влиянием культуры в которой она растет и развивается.

Культура — это коллективное программирование сознания, которое отличает членов одной группы или типа людей от других
Герт Хофстеде, нидерландский социолог

Исследователи находят корреляции в восприятии информации в зависимости от страны и культуры. Вот несколько исследований в контексте рекомендаций:

So What?
Изучение культурных особенностей поможет выдвинуть гипотезы для проверок. Например, можно решить вопросы онбординга в приложении и проблему холодного старта в алгоритмах рекомендаций.
Не стоит пренебрегать индивидуальными характеристиками человека. Это более важный фактор, с который нужно брать с бОльшим весом.

Подход к исследованию в зависимости от ситуации

Jeanette Fuccella составила фрейморк для приоритизация исследований. Схема на картинке довольно говорящая, но вот две статьи для погружения:

  1. How to choose the right research methods for your discovery process
  2. A Tried and True Framework for Prioritizing User Research
  3. Building a framework for prioritizing user research

Организация знаний

Данные — это необработанные наблюдения пользователей.
«Находки» отражают закономерности между точками данных.
Аналитика (инсайты) — это практические рекомендаии, основанные на исследованиях и бизнес-целях.

https://www.nngroup.com/articles/data-findings-insights-differences/

Информационная иерархия знаний DIKW (data, information, knowledge, wisdom)

https://ru.wikipedia.org/wiki/DIKW

Atomic Research

https://tsharon.medium.com/foundations-of-atomic-research-a937d5da5fbb

Меньше нотификаций дают лучшую возвращаемость в долгосроке

Ресерчеры и аналитики из Мордакниги установили, что меньшее количество нотификаций в долгосрочке обеспечивает лучшую возвращаемость в продукт. Хотя поначалу продуктовые метрики и просели.

И выводят два тезиса:

  • Результаты эксперимента в короткосроке и долгосроке могут сильно отличаться
  • Меньше нотификаций, но более качественных полезнее в долгосрочной перспективе.

Вроде ясно и очевидно, но представляю сколько организационных и волевых усилий потребовалось для запуска такой инициативы. На масштабах Фейсбука, потеря сессий выливается в гигантские недополученные суммы от показа реклам.

Чтобы этот эксперимент провести и защитить использовали данные из опросов и фактического поведения аудитории.

Еще один хороший пример как смешивание разных типов данных и методов помогают в сложных бизнес-ситуациях.

https://medium.com/@AnalyticsAtMeta/notifications-why-less-is-more-how-facebook-has-been-increasing-both-user-satisfaction-and-app-9463f7325e7d

Петли, дуги и рельеф

Это, пожалуй, самая познавательная для меня статья из 2021. Не помню, почему не делился раньше, но исправляюсь.

Она больше про проектирование, а не аналитику, но позволяет взглянуть на продуктовую работу под другим углом.

Суть в том, чтобы представить ваш продукт как «пространство» через которое люди пробиваются к своей цели. Идея вроде как из геймдева, но расширяет немного сознание.

Кратко пересказывать не буду. Это достойно полного прочтения

https://stephenanderson.medium.com/when-customer-journeys-dont-work-arcs-loops-terrain-4f7f8ac6df4e

Data Enabled Design

Рассказ о том, где и как использовать дата саенс в дизигн, а дизигн в дата саенсе.
https://uxdesign.cc/why-design-needs-data-af3d47584847

Мне вот эта фраза из статьи прям резонирует

I’ve just realized that data and data literacy is an important part of designing at scale.

Статья короткая, поэтому пересказывать нет смысла. Внутри коротко про основные методы и полезные ссылки.
Я хочу обратить внимание на то, где требуются такие смешанные подходы.

Например, сам автор, судя по его портфолио, работает в каком-то R&D поле, где смешиваются физическое и цифровое пространство.

Схожий кейс, но только развернутый на 300+ страниц, продвигается отделом Data Enabled Design из Philips.
Они делают всякие умные устройства для дома (называют это “intelligent ecosystems”) и в рамках таких проектов прибегают к смешанным ресерчам.

Ранее Ctrl + ↓