Neon Play увеличивает ARPDAU с помощью инструмента A/B-тестирования IronSource для монетизации рекламы

О сайте
Neon Play - студия мобильных игр, базирующаяся в Великобритании.
В их портфолио такие хиты, как Idle Tap Strongman, Cannon Man и Buca!
Задача
Команда Neon Play уделяет большое внимание данным, считая, что данные о производительности игры так же важны, как геймплей и удовольствие от игры. Однако им было сложно принимать точные решения на основе данных при тестировании новых стратегий Monetization.
Каждый раз, когда они хотели протестировать монетизацию рекламы, они вводили новое изменение для всех пользователей, а затем сравнивали данные за предыдущую неделю с данными за неделю после изменения. Но без контрольной группы, которая представляет собой часть пользователей, изолированных от тестируемой переменной, Neon Play не могла гарантировать точность результатов, поскольку множество факторов могли вызвать предвзятость и исказить результаты. Например, при сравнении данных за одну неделю с другой не будут учтены изменения в DAU приложения.
Кроме того, сторонняя аналитическая платформа Neon Play, позволяющая оценить продолжительность сеансов и уровень удержания пользователей, не давала полной картины по доходам от рекламы, что не позволяло увидеть полный финансовый эффект от изменений и делало анализ данных неполным.
В конечном счете, измерение инкрементальных и причинно-следственных связей между конкретными изменениями было невозможно без наличия необходимых инструментов. Компании Neon Play требовался простой способ точного тестирования новых стратегий Monetize.
Решение
После всестороннего тестирования всех основных решений для посредничества в рекламе Neon Play выбрала IronSource в качестве своей платформы, в первую очередь благодаря набору продуктов и широким возможностям отчетности. Вскоре после этого Neon Play начала тестировать свою стратегию монетизации рекламы с помощью инструмента A/B-тестирования, который теперь был доступен им как пользователям платформы Mediation.

Во-первых, в рамках тестирования водопада Neon Play протестировала различные плоские цены CPM, желая узнать, компенсирует ли производительность высоких ставок eCPM потенциально более низкую fill rate каждой сети.
"Мы долго искали партнера по медиации, но ответ был прост. Мы остановились на IronSource, потому что их отчетность не имеет себе равных".
- Оли Кристи, генеральный директор Neon Play
Кроме того, компания Neon Play протестировала внедрение интерстициальной рекламы в игру, которая до этого монетизировалась только за счет видео с вознаграждением. Компания Neon Play знала, что интерстициальные объявления могут негативно повлиять на удержание пользователей, если их неправильно внедрить, а также хотела определить частоту показа рекламы, которая бы оптимально сочетала увеличение дохода и отток пользователей.
Результаты
Neon Play увеличила ARPDAU с минимальным влиянием на удержание, протестировав интерстициальную рекламу с IronSource. Обнадеживающие результаты побудили Neon Play сохранить интерстиции в своей игре и провести второй тест для дальнейшей оптимизации частоты объявлений, что еще больше увеличило ARPDAU.
"Мы никогда не рассматривали тестирование как стандартную практику, но с IronSource это так просто, что теперь мы постоянно проводим его для каждой игры".
- Оли Кристи, генеральный директор Neon Play
В конечном итоге инструмент IronSource решил все проблемы Neon Play, связанные с A/B-тестированием. Широкая отчетность IronSource по таким показателям, как доход, ARPDAU и удержание, позволила Neon Play понять целостное воздействие каждого теста и с уверенностью проанализировать результаты. Более того, использование контрольной группы и проведение инкрементных тестов позволило Neon Play выявить причинно-следственные связи и принять решения, основанные на данных, для улучшения пользовательского опыта игры, обеспечив при этом максимально возможный доход.
На самом деле, благодаря тому, что с помощью IronSource легко настраивать тесты, тестирование стало стандартной практикой для Neon Play.
В IronSource работают одни из самых приятных людей в отрасли". И как мы все знаем, характеристики и уникальные торговые точки играют свою роль, но отношения с партнером - это ключ к успеху!"
- Оли Кристи, генеральный директор Neon Play