Как внедрение Amplitude помогло Лиге Ставок усилить data-driven культуру
14 апреля 2021
Продуктовая аналитика позволяет компаниям проанализировать поведение пользователей в продукте. Это помогает быстрее развивать продукт и делать его полезнее для людей. Если вы хотите внедрить систему продуктовой аналитики, но не решаетесь — посмотрите на опыт Лиги Ставок.
В кейсе рассказываем, как аналитики Adventum помогли команде Лиги Ставок внедрить сервис Amplitude и как это изменило отношение к данным и продукту в компании.
В кейсе рассказываем, как аналитики Adventum помогли команде Лиги Ставок внедрить сервис Amplitude и как это изменило отношение к данным и продукту в компании.
О Лиге Ставок
Работа с данными без Amplitude
Зарождение культуры данных
В начале 2020 года в компании сформировали новый отдел «Центр аналитики» (Data Office), который стал связующим звеном для подразделений бизнеса по предоставлению данных и проведению исследований.
Но с созданием команды появлялись новые требования к источникам данных, что подсветило главный недостаток в аналитике: отсутствие отдельной системы с данными о поведении пользователей в продукте. Поэтому тогда же в начале 2020 по запросу Дмитрия Урдина, главного менеджера по продукту в Лиге Ставок, было принято решение о внедрении системы продуктовой аналитики. Вопрос был только в том, какую выбрать.
Но с созданием команды появлялись новые требования к источникам данных, что подсветило главный недостаток в аналитике: отсутствие отдельной системы с данными о поведении пользователей в продукте. Поэтому тогда же в начале 2020 по запросу Дмитрия Урдина, главного менеджера по продукту в Лиге Ставок, было принято решение о внедрении системы продуктовой аналитики. Вопрос был только в том, какую выбрать.
Кто работал с данными
Основной упор в продукте делали на привлечении трафика, поэтому требовался сбор и анализ данных как для команды маркетинга, так и для всего бизнеса.
До появления Data office и продуктовой аналитики задачи по аналитике были абстрактные, без конкретных целевых результатов. Поэтому в процессе сбора данных возникали проблемы:
1️⃣ Сложно было определить приоритетность задач. И выполнение занимало от недели до нескольких месяцев.
2️⃣ В каждом подразделении были собственные аналитики, источники и модели расчета. Одни и те же показатели часто отличались по качеству и наполнению.
3️⃣ Долгое ожидание. Иногда из-за большой нагрузки, иногда из-за отсутствия веб-аналитика в команде маркетологи и продакты не могли получить полноценную информацию о метриках, даже если имели доступ к системам Яндекс.Метрики, Google Analytics, AppsFlyer. Им приходилось оставлять заявку в Help Desk и, в зависимости от приоритетов и свободного времени сотрудников, ждать ответ от нескольких часов до недель.
4️⃣ Отсутствие контроля качества. В команде не было человека, который бы проверял корректность сбора давно введенных событий. Они проверялись только при аномальных росте или падении.
Доступность, качество и актуальность данных напрямую влияют на эффективность управления продуктом и бизнес результаты.
В Лиге Ставок поняли, что оценить эффективность всех команд, влияющих на продукт, и обеспечить стабильный рост бизнеса можно только на основе точных данных. Так проблема сбора и анализа данных о пользователях в продукте стала ключевой.
До появления Data office и продуктовой аналитики задачи по аналитике были абстрактные, без конкретных целевых результатов. Поэтому в процессе сбора данных возникали проблемы:
1️⃣ Сложно было определить приоритетность задач. И выполнение занимало от недели до нескольких месяцев.
2️⃣ В каждом подразделении были собственные аналитики, источники и модели расчета. Одни и те же показатели часто отличались по качеству и наполнению.
3️⃣ Долгое ожидание. Иногда из-за большой нагрузки, иногда из-за отсутствия веб-аналитика в команде маркетологи и продакты не могли получить полноценную информацию о метриках, даже если имели доступ к системам Яндекс.Метрики, Google Analytics, AppsFlyer. Им приходилось оставлять заявку в Help Desk и, в зависимости от приоритетов и свободного времени сотрудников, ждать ответ от нескольких часов до недель.
4️⃣ Отсутствие контроля качества. В команде не было человека, который бы проверял корректность сбора давно введенных событий. Они проверялись только при аномальных росте или падении.
Доступность, качество и актуальность данных напрямую влияют на эффективность управления продуктом и бизнес результаты.
В Лиге Ставок поняли, что оценить эффективность всех команд, влияющих на продукт, и обеспечить стабильный рост бизнеса можно только на основе точных данных. Так проблема сбора и анализа данных о пользователях в продукте стала ключевой.
Нехватка данных о поведении пользователей в продукте
Чтобы решить эту проблему, в продукте использовали стандартные системы: Google Analytics, Яндекс.Метрика, AppsFlyer и внедряли систему аналитики Matomo.
Не все данные собирались корректно, и в инхаус решениях часто возникали проблемы, например, с базой данных Matomo при высокой нагрузке — система просто зависала. Поэтому базу приходилось очищать, в том числе и от нужных данных.
Опыт Лиги Ставок доказывает, что в большинстве случаев для продуктовой аналитики лучше использовать готовое решение, а не делать собственную систему.
После неудачных попыток настроить продуктовую аналитику команда Лиги Ставок обратилась в Adventum: digital-агентство уже 3 года помогало компании размещать медийную и мобильную рекламу, привлекать пользователей и увеличивать количество ставок. В 2020 году в агентстве предложили внедрить сервис продуктовой аналитики Amplitude.
Не все данные собирались корректно, и в инхаус решениях часто возникали проблемы, например, с базой данных Matomo при высокой нагрузке — система просто зависала. Поэтому базу приходилось очищать, в том числе и от нужных данных.
Опыт Лиги Ставок доказывает, что в большинстве случаев для продуктовой аналитики лучше использовать готовое решение, а не делать собственную систему.
После неудачных попыток настроить продуктовую аналитику команда Лиги Ставок обратилась в Adventum: digital-агентство уже 3 года помогало компании размещать медийную и мобильную рекламу, привлекать пользователей и увеличивать количество ставок. В 2020 году в агентстве предложили внедрить сервис продуктовой аналитики Amplitude.
Этапы внедрения системы продуктовой аналитики Amplitude
Чтобы принять решение о покупке Amplitude, в Лиге Ставок прошли несколько этапов внедрения этой системы:
Давайте рассмотрим каждый из них подробнее:
Этап 1. Аудит
На этом этапе аналитикам Adventum нужно было проанализировать, как устроена аналитика в Лиге Ставок, и выявить ее узкие места. Для этого они составили список вопросов:
- про внедрение аналитики;
- про документы и регламенты по работе с данными;
- про поддержку аналитики;
- про оптимизацию продукта и отчетность;
- про доступность данных;
- про коммуникацию между командами.
Заполните форму, чтобы получить список вопросов для аудита продуктовой аналитики
Нажимая кнопку «Отправить сообщение», вы соглашаетесь на обработку персональных данных, условия политики конфиденциальности
На основе ответов от Лиги Ставок выявили основные проблемы: разрозненность и ограниченная доступность данных, отсутствие регламентов по работе с ними.
В результате аудита команда Adventum провела презентацию, где предложила Лиге Ставок подключить систему продуктовой аналитики Amplitude для решения проблем с данными.
В результате аудита команда Adventum провела презентацию, где предложила Лиге Ставок подключить систему продуктовой аналитики Amplitude для решения проблем с данными.
“
На этапе аудита нужно было выявить основные проблемы в процессах и дать рекомендации по их устранению. Ведь самое важное для data-driven компании — это удобные процессы по работе с данными. Данные должны быть доступны, понятны, подкреплены документацией и регламентами. Немаловажно — вовлечение сотрудников и их обучение по каждому из пунктов. Именно на это были направлены наши усилия в дальнейшей работе.
2 этап. Подготовка к тестированию
Перед тестированием было важно определить, какие именно события отправлять в Amplitude, и записать их в единый реестр — перечень действий, которые может совершить пользователь в продукте.
Реестр делает аналитику понятной для всех. Становится ясно, что обозначают те или иные события в Amplitude, поэтому можно без проблем отобразить и проанализировать нужную информацию.
Пример реестра:
Реестр делает аналитику понятной для всех. Становится ясно, что обозначают те или иные события в Amplitude, поэтому можно без проблем отобразить и проанализировать нужную информацию.
Пример реестра:
На этапе обсуждения планировали разметить небольшой участок воронки — регистрацию в iOS приложении, потому что там уже была настроена отправка событий в системы аналитики, но после составления схемы и реестра событий в Лиге Ставок решили сразу разметить основные воронки регистрации, ставок и заключения пари.
“
В процессе разметки мы выделили особенности строения продукта в сфере беттинга, которые задали нам вектор дальнейших действий:
- большое количество ивентов, на которые можно сделать ставку, и множество вариантов исхода ставки. Они дробятся, поэтому на сайте может происходить несколько сотен разных событий в день. Мы ввели более крупные категории по видам спорта, лигам и добавили id событий, чтобы легче их отслеживать.
- по правилам безопасности в беттинге нельзя передавать данные о стоимости «покупки». Поэтому мы концентрировались на исследовании пользовательского пути, а не на сумме пари.
3 этап. Проверка концепции (Proof of Concept)
Пока данные по воронкам собирались, команды Adventum и Лиги Ставок приступили к обсуждению Проверки концепции (Proof of concept) — критериев эффективности внедрения Amplitude в продукт. Команды обсуждали, как на стороне Лиги Ставок будут измерять ценность Amplitude.
Этот этап сделал весь процесс внедрения прозрачным и понятным для обеих сторон.
Результатом стал документ, где были прописаны:
1️⃣ Все этапы внедрения. От заключения Проверки концепции до полноценной интеграции со сроками и ответственными.
2️⃣ Риски. Команда Лиги Ставок выделила один риск — задержку в отправке данных.
3️⃣ Критерии оценки успеха. Полнота данных, уровень их детализации, выявление резких спадов и подъемов в аналитике и так далее.
На этом же этапе аналитики Adventum провели оценку стоимости Amplitude для Лиги Ставок на основе примерного количества событий в продукте в месяц (50-100 млн).
Этот этап сделал весь процесс внедрения прозрачным и понятным для обеих сторон.
Результатом стал документ, где были прописаны:
1️⃣ Все этапы внедрения. От заключения Проверки концепции до полноценной интеграции со сроками и ответственными.
2️⃣ Риски. Команда Лиги Ставок выделила один риск — задержку в отправке данных.
3️⃣ Критерии оценки успеха. Полнота данных, уровень их детализации, выявление резких спадов и подъемов в аналитике и так далее.
На этом же этапе аналитики Adventum провели оценку стоимости Amplitude для Лиги Ставок на основе примерного количества событий в продукте в месяц (50-100 млн).
4 этап. Тестирование
На этот период Лиге Ставок подключили расширенную версию Amplitude, потому что стандартных 10 млн. событий в месяц было недостаточно.
Аналитики Adventum организовали тренинг по работе с возможностями платного тарифа Amplitude, чтобы научить команду Лиги Ставок пользоваться системой и показать, какие инсайты можно найти с помощью ее инструментов.
Также был организован Telegram-чат, где представители Лиги Ставок в любой момент могли обратиться за помощью к аналитикам Adventum.
Аналитики Adventum организовали тренинг по работе с возможностями платного тарифа Amplitude, чтобы научить команду Лиги Ставок пользоваться системой и показать, какие инсайты можно найти с помощью ее инструментов.
Также был организован Telegram-чат, где представители Лиги Ставок в любой момент могли обратиться за помощью к аналитикам Adventum.
5 этап. Покупка Amplitude
После успешного тестирования Amplitude команда Лиги Ставок решила стать полноценным клиентом Amplitude. Компании перешли к заключению юридических документов и согласованию стоимости.
“
Сначала мы думали, что когда запустим Amplitude, она как волшебная палочка по взмаху ответит на все вопросы, которые нас интересовали, подсветит все точки роста в продуктах. Когда мы интегрировали систему и запустили в нее данные, то поняли, что самый сложный вопрос заключается в разметке продуктов: как разметить каждый элемент продукта, чтобы выстроить их в цепочку и понять, где слабое место.
После принятия решения о покупке Amplitude, команда Лиги Ставок сформировала задачи, которые они хотят решить с помощью системы продуктовой аналитики.
Заявка на консультацию по Amplitude
Нажимая кнопку «Отправить сообщение», вы соглашаетесь на обработку персональных данных, условия политики конфиденциальности
Задачи для Amplitude
1️⃣ Удерживать клиента, найти причины низкой конверсии, оттока и уменьшить его.
2️⃣ Увеличить конверсию в регистрацию, совершение ставки и депозит.
3️⃣ Интегрироваться с другими системами, в том числе с внутренним хранилищем данных компании.
4️⃣ Отслеживать Customer journey map (CJM) и следить за воронками в регистрацию и ставку с пониманием всех шагов и скорости их прохождения.
5️⃣ Отслеживать, из какого раздела совершается ставка.
6️⃣ Отслеживать работу с корзиной (купонником), куда пользователь добавляет события: почему «покупка» ставки не удается, какие исходы бросают и почему.
7️⃣ Отслеживать, что люди, пришедшие по целевой компании, выполняют условия, а если нет — откуда уходят: с неинформативного лендинга, на этапе авторизации, и так далее.
8️⃣ Отслеживать, пользуются ли клиенты новыми фичами и как это влияет на другие возможности продукта.
2️⃣ Увеличить конверсию в регистрацию, совершение ставки и депозит.
3️⃣ Интегрироваться с другими системами, в том числе с внутренним хранилищем данных компании.
4️⃣ Отслеживать Customer journey map (CJM) и следить за воронками в регистрацию и ставку с пониманием всех шагов и скорости их прохождения.
5️⃣ Отслеживать, из какого раздела совершается ставка.
6️⃣ Отслеживать работу с корзиной (купонником), куда пользователь добавляет события: почему «покупка» ставки не удается, какие исходы бросают и почему.
7️⃣ Отслеживать, что люди, пришедшие по целевой компании, выполняют условия, а если нет — откуда уходят: с неинформативного лендинга, на этапе авторизации, и так далее.
8️⃣ Отслеживать, пользуются ли клиенты новыми фичами и как это влияет на другие возможности продукта.
Как сейчас работают с данными
из Amplitude
С Amplitude каждый в компании может обратиться к данным о поведении пользователей, проанализировать их и предложить гипотезы по развитию продукта или решению проблемы. Раньше это могли сделать только руководители отделов. Благодаря этому у команд появился инструмент оценки: KPI по конверсиям и другим целям.
Изменения коснулись и новых релизов. Теперь каждое обновление перед релизом связывается с Amplitude, чтобы команда могла оценить уровень интереса к новой фиче и ее влияние на уже существующие разделы.
На ранних этапах внедрения Amplitude системой пользовались единицы сотрудников Лиги Ставок. Спустя полгода сервисом продуктовой аналитики активно пользуются 30 сотрудников.
Изменения коснулись и новых релизов. Теперь каждое обновление перед релизом связывается с Amplitude, чтобы команда могла оценить уровень интереса к новой фиче и ее влияние на уже существующие разделы.
На ранних этапах внедрения Amplitude системой пользовались единицы сотрудников Лиги Ставок. Спустя полгода сервисом продуктовой аналитики активно пользуются 30 сотрудников.
С появлением Amplitude изменилась и структура компании: помимо нового отдела Data office в Центре аналитики, создается отдел исследования пользовательского опыта. Всего в центр сейчас входят 7 человек, которые собирают, обрабатывают и используют данные в аналитике, включая Amplitude. И это только начало — Лига Ставок активно растет и ищет новые таланты. Узнать больше о компании, атмосфере и открытых вакансиях можно здесь.
Какие данные в Лиге Ставок передают в Amplitude
Максимальная разметка продуктов: структура Лиги Ставок похожа на e-commerce, тут те же товары (ставки) и корзина (купонник), но без передачи информации о деньгах. Для этого сделана интеграция с корпоративным хранилищем компании, где финансовые данные объединяются с данными продуктовой аналитики по пользователям.
Это решение позволяет дополнить профиль клиента в Amplitude с помощью данных из CRM. Теперь есть возможность сегментации по импортированным данным для проведения продуктово-поведенческой аналитики не только интересующих клиентских когорт при работе с гипотезами, а общепринятых сегментов букмекерского бизнеса.
Цифровой путь клиента в продукте: на данных, которые фиксируются в Amplitude, будут выстраивать рекомендательную систему с персональными предложениями.
Это решение позволяет дополнить профиль клиента в Amplitude с помощью данных из CRM. Теперь есть возможность сегментации по импортированным данным для проведения продуктово-поведенческой аналитики не только интересующих клиентских когорт при работе с гипотезами, а общепринятых сегментов букмекерского бизнеса.
Цифровой путь клиента в продукте: на данных, которые фиксируются в Amplitude, будут выстраивать рекомендательную систему с персональными предложениями.
Инсайты после внедрения
Благодаря внедрению системы Amplitude аналитики обнаружили слабые места в продукте и внутренних процессах:
1️⃣ Некорректный сбор данных об ошибках. Когда клиент делал ставку и сталкивался с ошибкой, он получал уведомление об этом. Это событие записывалось в мастер-систему и уходило в работу к аналитикам. Ошибки отправлялись рандомно, поэтому их сложно было отследить и быстро исправить.
2️⃣ Сложный этап регистрации и первой ставки. Он строился по большой воронке: пользователю нужно было заполнить анкету в несколько страниц, добавить документы, дождаться валидации и пройти еще много шагов, чтобы в итоге сделать ставку. Это воронка, в которой на каждом шаге пользователь мог уйти. Поэтому было важно найти в ней узкие места и улучшить их.
3️⃣ Отсутствие регламентов по работе с данными. В требованиях к команде разработки стали подробно описывать, какие шаги пользователя в продукте передавать в Amplitude. Так, продакт менеджеры и маркетологи начали выявлять популярные и непопулярные места в сервисе, а также предлагать гипотезы по улучшению пользовательского опыта.
Подробнее об этих инсайтах и их результатах мы расскажем в будущих кейсах и видео.
1️⃣ Некорректный сбор данных об ошибках. Когда клиент делал ставку и сталкивался с ошибкой, он получал уведомление об этом. Это событие записывалось в мастер-систему и уходило в работу к аналитикам. Ошибки отправлялись рандомно, поэтому их сложно было отследить и быстро исправить.
2️⃣ Сложный этап регистрации и первой ставки. Он строился по большой воронке: пользователю нужно было заполнить анкету в несколько страниц, добавить документы, дождаться валидации и пройти еще много шагов, чтобы в итоге сделать ставку. Это воронка, в которой на каждом шаге пользователь мог уйти. Поэтому было важно найти в ней узкие места и улучшить их.
3️⃣ Отсутствие регламентов по работе с данными. В требованиях к команде разработки стали подробно описывать, какие шаги пользователя в продукте передавать в Amplitude. Так, продакт менеджеры и маркетологи начали выявлять популярные и непопулярные места в сервисе, а также предлагать гипотезы по улучшению пользовательского опыта.
Подробнее об этих инсайтах и их результатах мы расскажем в будущих кейсах и видео.
“
Нам нужна была не просто система аналитики, а хороший опыт по ее запуску и использованию. У нас были проблемы в недостаточной компетенции: нужны были опытные “интеграторы”, которые показали бы, как правильно настроить работу с данными, и мы постепенно переняли бы этот опыт. Собственно, так и получилось.
Что планируется дальше
1️⃣ Настроить рекомендательную систему для пользователя: подсвечивать те места, которые его раньше интересовали.
2️⃣ Настроить персональные уведомления: напоминать клиенту о событии, которым он интересовался, но по которому так и не сделал ставку, и о событии, которое осталось в «купоннике».
3️⃣ Запустить в компании исследовательское подразделение, где на основе собранных данных будут разрабатывать решения по улучшению продукта.
2️⃣ Настроить персональные уведомления: напоминать клиенту о событии, которым он интересовался, но по которому так и не сделал ставку, и о событии, которое осталось в «купоннике».
3️⃣ Запустить в компании исследовательское подразделение, где на основе собранных данных будут разрабатывать решения по улучшению продукта.
“
После внедрения Amplitude мы пересмотрели все наши подходы как до, так и после принятия решения. Это важный фактор, который повлиял не только на наш путь при работе с новыми вызовами, но и на корпоративную культуру компании. Мы угадали с системой, а дальше все зависит от того, как мы научимся ее использовать.
Таким образом команда Data office хочет повысить лояльность клиентов и влиять на их поведение с помощью собранных данных.
“
Мы прошли долгий путь настройки подробного сбора данных с сайта и приложения Лиги Ставок, провели полный онбординг клиента в систему Amplitude: от обсуждения основного фокуса аналитики до обучающих мероприятий по работе с платформой. Теперь сотрудники Лиги Ставок могут самостоятельно работать с данными, искать полезные инсайты и делать продукт лучше, не дожидаясь ответа от отдела аналитики.
Я рад, что совместно с коллегами из Лиги Ставок нам удалось проделать такую работу и заложить основу культуры продуктовой аналитики в компании.
Культура продуктовой аналитики ведет к увеличению числа гипотез, ускорению разработки и росту метрик. Каких результатов удалось добиться командам Лиги Ставок, вы узнаете в следующих кейсах. Следите за обновлениями!
700+ аналитиков и продактов уже подписаны — присоединяйтесь!
Получайте полезные материалы по Amplitude и продуктовой аналитике прямо на почту.
Спецпроект о компаниях, которые ускорили рост продукта
с помощью продуктовой аналитики
с помощью продуктовой аналитики
Product Analytics Champions: Лига Ставок
Мы используем файлы cookie, чтобы улучшать работу сайта. Правила использования.
OK
Получайте полезные материалы по продуктовой аналитике прямо на почту.
Нажимая кнопку «Отправить сообщение», вы соглашаетесь на обработку персональных данных, условия политики конфиденциальности