Увеличение конверсии новых пользователей до главного экрана

Тогда это для нас это стало большим успехом. Помимо продуктового улучшения это имело еще и медицинскую ценность. Мы даже оформили этот кейс как исследование и подали его на Всемирную конференцию по сексуальной медицине(WMSM). Исследование прошло отбор и в феврале этого года было представлено в Порту (Португалия).

Продолжение 

Но 32,7% - это для нас не предел. Мы уже вошли во вкус, продолжили анализировать данные и довольно быстро нашли три слабых места. Ими оказались экран ввода имени, экран принятия условий и экран уведомления о предстоящем тесте.

Экран ввода имени

На экране ввода имени мы теряли 31,6% пользователей. И это был самый первый экран.

Почему?

Оказалось, что с точки зрения психологии, когда мужчина сталкивается с интимной проблемой, а незнакомое приложение сразу просит персональные данные, это вызывает недоверие и тревогу. В результате часть пользователей просто закрывало приложение.

Мы решили, что не стоит делать это так агрессивно, и перенесли этот экран дальше по сценарию.

Теперь сначала приложение:

• приветствует пользователя
• объясняет, как поможет 
• показывает, что продукт создан с врачами
• демонстрирует экран конфиденциальности

И только потом предлагает ввести имя.

Также мы переработали сам экран:

• сделали ввод имени необязательным (кнопка «Пропустить»)
• разрешили использовать псевдоним
• добавили возможность вводить цифры и символы
• убрали автоматически открытую клавиатуру

Это позволило снизить давление на пользователя и повысить доверие.

Экран конфиденциальности

На этом экране мы теряли до 7,4% пользователей.

Ранее пользователь должен был:

• поставить галочку
• нажать «Продолжить»

Мы упростили механику:

• убрали чекбокс
• изменили текст на: «Продолжая, вы соглашаетесь с политикой конфиденциальности и условиями использования»
• сделали кнопку активной по умолчанию

Теперь вместо двух действий нужно сделать одно.

Экран уведомления о предстоящем тесте

На экране, где мы сообщаем, что сейчас зададим несколько вопросов, уходило 11,4% пользователей.

На первый взгляд, он выглядел нормально. Мы решили переработать дизайн:

• добавили иллюстрацию
• сократили текста

На тот момент это казалось чисто косметическим изменением. Но нам важно было понять что именно не устраивало пользователей. Здесь нам помогли A/B тесты.

A/B тесты

В Firebase есть инструмент Remote Config, который позволяет:

• запускать несколько версий экранов
• делить аудиторию (например 50/50)
• видеть результаты в реальном времени
• останавливать его в любой момент

После теста можно оставить более эффективную версию и раскатить на всю аудиторию.

Кстати, все изменения мы запускали через A/B тесты - даже там, где казалось, что результат очевиден. Ведь мы стараемся опираться на данные, а не на интуицию. 

Ниже скриншот как выглядит запущенный A/B тест на примере экрана ввода имени.

Расширение аналитики

Параллельно мы расширили аналитику. 

Добавили отслеживание до главного экрана, включая:

• платежный экран
• экран «Ваш путь разделен на 5 шагов»
• запрос на отправку уведомлений
• экран «Что нового в этой версии»

И тут вскрылся неприятный факт: если считать финальной точкой регистрации главный экран, а не Progress Potential как мы делали раньше, конверсия падает до 21%. Все таки плюс 4 дополнительных экрана. Но так будет правильнее.

Результаты

Все изменения вошли в релиз 1.5.8. Мы выпустили его в январе. Первые общие данные были не релевантные. Из-за запущенных тестов половина пользователей увидела старые экраны и общая картина получилась смазанной. Поэтому аналитику мы будем смотреть по данным за февраль. 

Итого по февралю:

• Потери на экране имени снизились в 10 раз (с 31,6% до 3,1%)
  Гипотеза подтвердилась. Все таки, если не спрашивать у мужчин имя в лоб, а все сначала все подробно объяснить, создать атмосферу доверия, дать возможность вводить псевдоним или не вводить имя вовсе, то это может сильно снизить отвал.
• Экран конфиденциальности показал рост отвала (+2,4%)
  Для нас это стало неожиданностью. Казалось, что улучшения очевидны, да и А/B тест изначально показал, что новая версия лучше. Но финальные цифры показали другой результат.
  
  Быстрого ответа у меня пока нет. Будем разбираться почему так вышло и что с этим можно сделать.
  
  
• Экран теста улучшился незначительно (−0,5%)
  Рост в кажется несущественными и находятся на уровне статистической погрешности. Поэтому думаю есть смысл еще подождать и посмотреть на мартовские отчеты. 

Общие же результаты получились следующие:

1. Конверсия до Progress Potential выросла с 32,7% до 57,5% (+24,8%)
2. До главного экрана теперь доходят 38,9% пользователей 

Заключение

Этот кейс наглядно показывает, насколько важно знать свои цифры.

Аналитика позволяет видеть реальные проблемы, находить узкие места и принимать решения на основе данных.

Мой совет фаундерам: если хотите управлять продуктом, то собирайте аналитику с каждого экрана. И чем раньше вы начнете это делать, тем будет лучше для вашего бизнеса. 

Мы же на этом не заканчиваем. Про новые итерации я расскажу в следующих постах.

Так что, не переключайтесь.