Product × Science: заметки с тегом Доклад

Три типа создания инноваций: versioning, visioning, venturing

Mon, 23 Mar 2020 10:42:00 +0300

Кевин Дэйм рассказал о проблеме нехватки времени на продумывание вижена в продуктовых командах YouTube.
Причина — скиллсет команд в Google заточен на итерации и быструю проверку гипотез. Такой подход называется versioning. И он оправдывает себя в приложениях с миллиардами пользователей, где даже мелкие изменения могут дать большой импакт.

Но иногда команде требуется сделать скачок в развитии, но при этом не «замедляться» с точки зрения доставки новых релизов на прод. Нужно проработать долгосрочный видение. Зачастую внутри команды не будет ни нужных компетенций, ни времени.
Здесь на помощь приходит команда Кевина, которая и помогает создать концепт на ближайшие 2-3 года.

Ключевые слайды

Product Visioning at Google — https://www.youtube.com/watch?v=fMCc89kO5BI
The Power of Visioning — https://design.google/library/youtube-visioning/

Кейс: находим драйверы роста в социалке при помощи ML и поднимаем ретеншн

Sun, 12 Jan 2020 00:00:00 +0300

В феврале на Flo Data Meetup я рассказывал про кейс с работы. В нём я применил «классические» методы продуктового анализа и теорию графов.

По итогам ресерча продуктовая команда смогла лучше понять предпочтения пользователей, выделала новый сегмент аудитории, выдвинула несколько успешных гипотез и получила прирост к метрикам.

Доклад изначально готовился для аналитиков, но получил хорошие отзывы от разработчиков, дизайнеров и продакт-менеджеров.

Видео содержит:
— Вводную про продуктовые подходы
— Небольшой обзор на науку Human-Computer Interaction, из которой я люблю брать новые идеи
— Информацию про продукт
— Вопросы на которые стейкхолдеры хотели получить ответы
— Как я перевёл эти вопросы на язык данных и как начал ресерч
— Почему не хватило «классических» методов
— Минимум про матрицы и теорию графов
— Сниппет кода, который поможет самому сделать похожий ресерч
— Как я интерпретировал полученные данные
— Что мы сделали с инсайтами и какой получили эффект в метриках
— Книжки для самообразования
— QnA секцию, из которой вы сможете немного узнать про нюансы работы с данными в Flo + немного обсудили филосовские вопросы 🙂

CHI — конференция для инноваторов

Tue, 14 May 2019 02:00:00 +0300

Что это?

Конференция проводится организацией ACM (Association for Computing Machinery). Это огромнейшая ассоциация, которая курирует много движений в мире технологий. Существует с 1947 года.

В состав AMC входят поднаправления (SIG, Special Interest Groups). Одно из направлений это Human-Computer Interaction (HCI, иногда пишут CHI).

Я немного рассказывал про HCI в своем докладе на Киви Кухне (слайды). Вкратце, это направление науки изучает как люди выполняют задачи используя технологии.

В HCI изучают как люди выполняют задачи используя технологии.

Продемонстрирую разнообразие тем, поигравшись с кусками определения:

Люди: один/группа/социум, дети/взрослые/старики, азиаты/европейцы/марсиане, мужчины/женщины/покемоны.
Задачи: микро/макро, последовательные/параллельные, сложные/простые, синхронные/асинхронные, интересные/рутинные/стрессовые, игры/работа/общение.
Технологии: web/mobile/часы/протезы/VR/AI/«умная ткань» и так далее и тому подобное.

Дисциплина смешивает подходы из Computer Science, всех социальных наук и подмешивая иногда биологию с физикой. На конференцию приехало почти 4000 человек.

The ACM CHI Conference on Human Factors in Computing Systems is the premier international conference of Human-Computer Interaction. CHI — pronounced ‘kai’ — is a place where researchers and practitioners gather from across the world to discuss the latest in interactive technology.

Что там показывают?

Полная программа включала в себя ~1200 уникальных активностей.

Презентация научных работ (~700 штук)
Выступление — 15 минут:

Что за проблему хотим решить? Почему это важно?
На какие вопросы нам нужно дать ответ? Какие гипотезы?
Выбор и обоснование методологии
Процесс сбора данных: как и с кого собирали
Анализ данных и результаты
Рекомендации по реализации и/или освещение новых вопросов
Дают ссылку на подробную статью (10+ страниц), где описаны все нюансы, расчеты и релевантные работы.
Пять минут на вопросы из аудитории.

Очень крутой формат, который позволяет ознакомится с работой, а затем чуть ли не воспроизвести ее самому.

Постерная сессия (~250 штук)

Постер — это зачастую красиво рассказанная история с картинками и тезисами на формат А1. По-сути, это инфографика по научной работе, которую автор также прилагает на конференцию.

В принципе, из постера можно было бы сделать и обычный доклад. Насколько я знаю, кто-то сам не хочет запариваться, а кого-то не допускает комиссия.

На специальной площадке расположены ~50 стоек, на которые в первой половине каждого дня авторы вешают свои работы. Пока они готовятся, можно присмотреть интересные для себя вещи. К началу второго перерыва между сессиями, они уже готовы и посетители конференции идут туда коротать время. Каждый постер презентуют 1-2 человека. Можно (и нужно) подходить к ним, узнавать что за ресерч и просто болтать за жизнь.

Я поговорил с коллегой из Atlassian, который разработал иерархию метрик для редизайна Jira. Еще скоротал время с корейскими студентами, которые применяли теорию графов кучи всего, в т.ч. для анализа активности фан-сообществ в социальных сетях. Ну и просто постоял около многих стендов и послушал авторов. У многих поистине горят глаза от того, чем они занимаются.

Курсы, воркшопы и мастер-классы (~30 штук)

CHI — это еще и место учебы. Преподаватели из топовых универов и компаний, дают интенсивны размером от 2 до 4 академических пар.

Я посетил курс от ребят, которые в свое время консультировали yahoo и bing по развитию поиска. Они учили подходу моделирования поведения пользователей, который используется в экономике — cost-benefit analysis. Из этих формул было четко понятно какие «выгоды» и «траты» несет юзер, что давало инсайты для последующего редизайна.

Составление такой модели требует поистине глубокого понимания задач пользователей и продвинутой математики. Тут я впервые увидел использование дифуров для продуктовой работы, а не в задачах ракетостроения.

Интерактивные стенды (много)

Множество научных лабораторий со всего мира: VR-шлемы, роботы, интерфейсы мозг-компьютер и много всякого…

https://www.instagram.com/p/BxTEdJ8DaH9/

Ярмарка вакансий

Топовые компании из США, Европы и Азии организовали свои площадки и пылесосили контакты всех, кто потенциально интересен. Интересно отличилась Apple. От них были две вакансии, где неприметно и мелким шрифтом написаны общие требования к кандидатам. А снизу была приклеена папка, куда надо кидать резюме. Папка была очень уродливая, словно мусорная урна…

Яркие спикеры

Вступительный и финальный доклады были на высоте. Первый доклад заряжал позитивом и вдохновлением. Последний рассказывал о глобальном видении и стратегии Google на рынке умных вещей. Такое стоит послушать (оцените спикера).

Из минусов

Конференция, прежде всего, ориентирована на академическое сообщество. Научный совет решает, что будет презентовано. Они смотрят на какие-то формальные вещи, ссылки на литературу и автора публикации. Как я понял из кулуарных бесед, практикам сюда пробиться крайне тяжело. У статьи должен быть хотя бы один автор с академическим опытом.

Предыдущее ограничение сильно отражается на докладах. Многие выступления сложно или невозможно применить на практике — авторы не сильно задумываются об этом. 80% выступлений заканчиваются фразой

Мы копнули этот вопрос глубже. Спустя 3 месяца исследований мы поняли, что он оказался сложнее чем мы предполагали. Наш вклад в HCI сообщество заключается в том, что мы нашли новые вопросы, на которые надо дать ответ. Надеюсь, это вдохновит исследователей заняться этим в будущем.

Получается ресерч ради ресерча. Явно не хватает какой-то практической нотки. Хорошо, чтобы есть остальные 20% докладов. В них презентуют либо сотрудники из ведущих IT-компаний, либо ученые из топовых универов, которые делают исследования по заказу индустрии. Нужно проделать большую подготовительную работу по составлению расписания, чтобы попадать только на интересные выступления.

“Конференция, прежде всего, ориентирована на академическое сообщество.”

Необычные вещи

Призывы и протесты и за равноправие/разнообразие

Я замечал намеки разного размера:

Разговоры людей.
Стикеры с призывами на специальной стене «вопросов и предложений». Мало черных/женщин/практиков/инвалидов спикеров.
Мини-протест в центре павильона... https://www.instagram.com/p/BxMy9AWF8_L/

Я, наверное, не понимаю всей внутренней кухни, но по мне это была самая «социально-благоприятная» конференция, на которой я был:

Спикеры и участники были всех возрастов, наций, полов и конфессий.
Были сурдопереводчики на некоторых докладах и ключевых кейноутах. Широкие проходы, специальные подъемники.
На конференции можно было покушать все виды еды: глютен-фри, веганская, кошерная и еще 50 видов.
Один из самых популярных тегов в научных работах этого года — Accessibility.
Во всех исследованиях всегда указывали, что у них 50-50 мужчин и женщин. В одном выступлении проскользнули числа 75-25, так спикер быстро перелистнул слайд, а из зала донесся небольшой смех.
Кругом информация об экологии и вторичном использовании материалов.

Ясно, что всегда можно сделать лучше/выше/сильнее. Непонятно, когда надо останавливаться.

Обнесли кабинет

В первый день обокрали кабинет, где проходил один из курсов. Слушатели вышли перекусить, а по возвращению остались ни с чем. Как так?))

Вкратце

Несмотря на академичность, сюда стоит ехать, чтобы реально узнать про новые подходы и словить инсайтов. Как я узнал в беседе с одним из Гуглеров, CHI одна их немногих конференций куда катаются синьоры, чтобы поучиться.

Кому стоит сюда приехать

Мастхэв для:

Исследователей — аналитики, ux-ресерчеры.
Изобретателей — ux/ui дизайнеры, проектировщики, разработчики софта/железа.
Под вопросом ценность для продуктовых менеджеров и стратегов:
- Слишком сильно углубляются в детали, много воды.
- За трендами/инсайтами можно следить более эффективно.
- Нетворкинг с отдельными спикерами/участниками будет полезен, но можно найти другие способы познакомиться.
Совсем не нужно ехать, если вы работаете на уровне операционки/тактики.

Можно попробовать похайрить народ. Думаю, будка на выставке хорошо бы конвертировала в лидов на собеседования. Много умных людей-теоретиков. В комбинации с одним практиком может получится интересная связка.

Что касается меня, то я бы вернулся на CHI еще раз. Следующий забег на Гаваях.

Как исследовать пользователей количественными методами

Sat, 08 Dec 2018 18:28:00 +0300

Ребята из QIWI позвали рассказать о количественных исследованиях пользователей. Сделал обзорный доклад и за час осветил несколько тем:

HCI — почему это науку должен изучать любой, кто создает продукты.
Где в качественных исследованиях применять математику.
Как масштабировать инсайты из интервью и опросов.
Как чисто на данных понять пользователя.
Необходимые навыки для работы.
С чего начать и что читать.

Запись доклада с QIWI Кухни.
Ссылка на Google Slides.
Список блогов по теме.

Как люди принимают решения?

Thu, 18 Jan 2018 17:00:00 +0300

Уже очень давно в моем загашнике полезных материалов пылилась лекция с TED про то, как люди делают выбор. Не помню точно, почему это видео попало в закладки. Вроде бы причиной стал разговор на тему “какие тарифы показывать в разных странах для SaaS продукта”.

Умные мысли из видео:

Мы учимся выбирать с детства, поэтому в разных странах/культурах люди по-разному относятся к проблеме выбора.

Например, в американской культуре дети с детства привыкли к разнообразию услуг и вещей. Они любят сами выбирать.
Бренды подчеркивают, что свобода выбора важна. Например, слоган Starbucks — “happiness is in your choices”.
В азиатской культуре принято прислушиваться к более опытным людям и давать им право выбирать за тебя.

Много выбора сбивает с толку. Людям сложнее найти оптимальный вариант.

Если продавец предлагаем широкий набор опций, то для покупателя они могут показаться одной. Клиент может не увидеть разницы.

В видео есть пример, где на территории бывшего СССР проводили интервью со старшим поколением. На нем предлагалось выбрать один напиток из Кока-Колы, Пепси, Миранды и т. д. Всего семь. Когда люди смотрели на это разнообразие, то это для них это сливалось в один вариант — газировка.

Выбор в безвыйгрышной ситуации негативно сказывается в будущем. Человек затем будем прокручивать в голове вопрос “а если бы я сделал иначе?”. Если в такой ситуации выбор сделают за него (другой человек, “система”, автоматически), то жить будет легче.

В общем, рекомендую выделить 23 минуты жизни и расширить свой кругозор. Ссылка на видео — Sheena Iyengar: The art of choosing | TED Talk.

Jason’s Machine Learning 101

Tue, 19 Dec 2017 17:00:00 +0300

Красочная презентация от Гуглера про ML и прочее.
Приятно посмотреть. Есть теория и показаны примеры использования ML в «бою».

Доклад от 2019г.