Данные на странице группы медиации регулярно обновляются. В любой момент в течение 90 дней вы можете принять решение на основе данных и выбрать один из вариантов. После этого он будет использоваться абсолютно для всех пользователей в группе медиации.
Чтобы посмотреть и проанализировать показатели A/B-тестирования, выполните указанные ниже действия.
- Войдите в аккаунт AdMob на странице https://admob.google.com.
- На боковой панели нажмите Медиация.
- Выберите группу медиации с A/B-тестированием, которую нужно посмотреть.
Чтобы вам было проще анализировать результаты A/B-тестирования, в отчетах Google AdMob указывается разница в приведенном расчетном доходе между вариантами A и B. Приведенный расчетный доход – это примерная сумма, которую вы заработаете за 28 дней, если примените тот или иной вариант ко всем своим пользователям. Это позволяет сравнить оба варианта в одинаковых условиях и получить более точное представление об их эффективности.
Чтобы узнать, насколько различаются результаты вариантов, посмотрите разницу в приведенном расчетном доходе вверху страницы A/B-тестирования.
С помощью диаграмм можно сравнить эффективность разных источников объявлений для каждого варианта. Так вам будет легче анализировать результаты эксперимента. На сводной карточке представлен обзор основных показателей. Вы можете навести указатель на любой из показателей и узнать его значение для каждого варианта.
Показатели включают расчетный доход, эффективную цену за тысячу показов, коэффициент соответствия и взвешенное количество показов для вариантов А и B. Их значения будут обновляться в течение тестирования.Чтобы посмотреть более подробные графики, нажмите на показатель. На каждом графике представлены данные за день. Вариант B показан как процент изменений по отношению к варианту А.
Как интерпретировать результаты
После начала тестирования в AdMob сравнивается приведенный расчетный доход для обоих вариантов. Это позволяет понять, какой из них более эффективен. Как только будет выявлен вариант, стабильно показывающий более высокие результаты, он будет указан на странице A/B-тестирования. Здесь же появится рекомендуемое действие "Оставить исходный вариант" или "Применить тестовый вариант" в зависимости от того, какой из них окажется эффективнее.
Чтобы внести изменения в активное тестирование, нажмите Изменить тестирование. При этом будет завершено текущее тестирование и создано новое с такими же настройками, которые можно будет изменить. Чтобы результаты и рекомендации были точными, изменять запущенное тестирование нельзя. Для достижения результатов нужно время, поэтому не рекомендуем завершать тестирование на основе первых полученных результатов.
Лучший вариант и вероятность определяются на основе следующих критериев:
- Насколько стабильно лучший вариант показывал более высокую эффективность.
- Насколько сильно различаются результаты вариантов.
- Сколько данных доступно. Рекомендуем выбирать рекламный блок с высоким трафиком, чтобы для тестирования было достаточно данных. Обратите внимание, что тестируемые варианты должны получить хотя бы 10 000 запросов объявлений, чтобы сервис AdMob мог определить лучший вариант.
Чем выше стабильность показателей и разница в их величине, а также чем больше данных доступно для анализа, тем более высокой будет вероятность.
Если какое-то из этих условий не выполняется, AdMob не сможет выявить лучший вариант, и тогда на странице A/B-тестирования не будет указано однозначных результатов. Тем не менее вы сможете посмотреть показатели каждого из вариантов.
О доле пользователей для варианта B
Если доля пользователей составляет менее 50 %, к показателям для варианта B применяется коэффициент. Это позволяет сравнивать сопоставимые величины, имитируя условия, при которых доли пользователей одинаковы.
Например, если для варианта B настроена доля пользователей 10 %, расчетный доход будет умножен на 9, чтобы вы могли сравнить оба варианта в одинаковых условиях. Следовательно, если вариант B принес 10 долл. США, его расчетный доход с учетом коэффициента составит 90 долл. США.
Выбор варианта
Рекомендуем проводить тестирование не менее двух недель, прежде чем остановиться на одном из вариантов. Вы можете выбрать лучший вариант в любое время в течение 90-дневного периода. После этого он будет использоваться абсолютно для всех пользователей в группе медиации. Принимая решение, учитывайте разницу в показателях расчетного дохода и процентах вероятности.
Вы можете оставить вариант A или применить вариант B.
- Чтобы выбрать вариант A, нажмите Оставить вариант A. Настройки группы медиации останутся прежними.
- Чтобы выбрать вариант B, нажмите Применить вариант B. К аккаунту будут применен этот вариант.
Если до истечения 90-дневного периода вы не выберете ни один из вариантов, тестирование будет прекращено, после чего абсолютно для всех пользователей будет использоваться вариант А, даже если вариант B оказался более эффективным.
После окончания эксперимента у вас будет ещё 30 дней, чтобы выбрать вариант, после чего вариант B будет удален.