При проведении эксперимента важно знать, как отслеживать его результаты. Сравнивая эффективность новых и исходных настроек, вы сможете принять обоснованное решение: завершить эксперимент, внести изменения в исходную кампанию или создать кампанию с новыми настройками.
Из этой статьи вы узнаете, как отслеживать эксперименты и интерпретировать их результаты.
Инструкции
Как посмотреть результаты эксперимента
- Войдите в аккаунт Google Рекламы и нажмите на значок Кампании
.
- В меню разделов нажмите на раскрывающийся список Кампании.
- Выберите Эксперименты.
- Найдите и выберите нужный эксперимент.
- Проверьте таблицу "Сводка по эксперименту" и карточку сводки и нажмите Применить эксперимент или Завершить эксперимент.
.Какие данные приводятся в сводке
- В разделе "Сравнение эффективности" указывается период времени, за который сопоставляется эффективность экспериментальной и исходной кампании. Учитываются только полные дни, входящие и в период проведения эксперимента, и в диапазон дат, выбранный в таблице ниже. Если эти два диапазона не пересекаются, то в разделе "Сравнение эффективности" указываются полные дни, входящие в период проведения эксперимента.
- По умолчанию приводятся показатели "Клики", CTR, "Стоимость", "Показы" и "Все конверсии". Нажав на стрелку вниз рядом с нужным показателем, вы можете добавить или удалить любые из следующих данных:
- Клики
- CTR
- Стоимость
- Ср. цена за клик
- Показы
- Все конв. (только если настроено отслеживание конверсий)
- Коэф. конверсии (только если настроено отслеживание конверсий)
- Конверсии (только если настроено отслеживание конверсий)
- Стоимость/конв. (только если настроено отслеживание конверсий)
- Конверсии по показам (только если настроено отслеживание конверсий)
- В первой строке, следующей за названием показателя, приводится его значение из эксперимента. Например, если под заголовком "Клики" указано 4000, это означает, что с момента запуска эксперимента получено 4000 кликов.
- Во второй строке приводятся расчетные данные по разнице в эффективности между экспериментом и исходной кампанией.
- Первое значение – это разность между величиной показателя в эксперименте и в исходной кампании. Например, если в столбце "Клики" указано "+10 %", то, согласно расчетам, в эксперименте получено на 10 % больше кликов, чем в исходной кампании. Если накоплено недостаточно данных об эксперименте или исходной кампании, то вместо значения вы увидите "--".
- Второе значение показывает возможный диапазон разницы в эффективности, которая может существовать между экспериментальной и исходной кампанией при выборе доверительного интервала 95 %. Например, если вы видите [+8 %, +12 %], это значит, что рост эффективности может составлять от 8 % до 12 %. Если не накоплено достаточно данных об эксперименте или исходной кампании, то вместо значения вы увидите "--". Можно задать собственный доверительный интервал (по умолчанию он равен 80 %), чтобы изучить показатели эксперимента с помощью динамических отчетов.
- Если результат статистически значимый, рядом со значением появится синяя звездочка.
Полезная информация
Наведите курсор на вторую строку значений, чтобы посмотреть более подробные сведения, такие как:
Статистическая значимость. Показывает, являются ли результаты статистически значимыми.
- Статистически значимо. Эта пометка означает, что p-значение меньше или равно 5 %. Другими словами, результаты, скорее всего, не случайны, и эксперимент с высокой вероятностью продолжит показывать похожие результаты, если преобразовать его в кампанию.
- Статистически не значимо. Эта пометка означает, что p-значение больше или равно 5 %. Вот несколько возможных причин такого результата:
- недостаточное время проведения эксперимента;
- низкий объем трафика кампании;
- слишком маленькая доля экспериментального трафика;
- изменения не привели к значимой разнице в эффективности.
- В любом случае вы увидите пояснение о статистической значимости, например: "В силу произвольного характера выборки p-значение (вероятность достижения такой же или более высокой эффективности) составляет 0,2 %. Чем ниже p-значение, тем выше статистическая значимость результата".
- Доверительный интервал. Здесь приводится информация о доверительном интервале с пояснением, например: "В вашем эксперименте этот показатель с вероятностью 95 % будет отличаться от показателя в исходной кампании на +10 % – +20 %".
-
Здесь также приводятся фактические значения выбранного показателя в эксперименте и в исходной кампании.
Что можно сделать на карточке сводки
- Чтобы выбрать другой показатель, нажмите на стрелку рядом с текущим показателем.
- Чтобы посмотреть данные об определенной группе объявлений в эксперименте, нажмите на нее в таблице.
- Чтобы посмотреть сведения о кампании, например ее название и бюджет, наведите указатель на нужную ячейку в таблице.
Как анализировать временную диаграмму
На временной диаграмме показана эффективность одного или двух показателей для эксперимента и их изменение с течением времени в экспериментальной и контрольной кампаниях. С помощью этой диаграммы можно сравнить, как эксперимент повлиял на определенный показатель и как его значения менялись с течением времени.
Что произойдет, если приостановить или удалить эксперимент в кампании с максимальной эффективностью
Вы можете в любое время приостановить или завершить контрольную или экспериментальную компанию. Чтобы перезапустить приостановленный эксперимент, нажмите кнопку "Возобновить" или повторно активируйте кампании вручную.
- Приостановленные кампании
- Если приостановить контрольную или экспериментальную кампанию, эксперимент будет приостановлен. 100 % трафика будет направляться в кампанию, оставшуюся активной.
- Если приостановить и контрольную, и экспериментальную кампании, эксперимент тоже приостановится.
- Статус эксперимента на дату окончания
- Когда наступит дата окончания, статус эксперимента в кампании с максимальной эффективностью будет изменен на "Завершено" или "Запущен" независимо от настроек автоматического применения. Однако если результаты эксперимента хорошие и автоматическое применение включено, эксперименту все равно будет автоматически присвоен статус "Завершено".
- Если наступила дата окончания эксперимента и автоматическое применение отключено, нужно будет применить изменения вручную.
- Удаление кампаний
- Если удалить контрольную или экспериментальную кампанию, 100 % трафика будет направлено в кампанию, оставшуюся активной.
- Если удалить только контрольную кампанию, эксперимент будет запущен.
- Если удалить только экспериментальную кампанию, эксперимент будет завершен.
- Если удалить и контрольную, и экспериментальную кампании, эксперимент будет завершен.
- Если удалить контрольную или экспериментальную кампанию, 100 % трафика будет направлено в кампанию, оставшуюся активной.
Примечание. Это относится только к экспериментам в кампаниях с максимальной эффективностью, включая эксперименты для определения прироста, по преобразованию в кампанию с максимальной эффективностью и по оптимизации (с дополнением конечного URL).
| Статус кампании | Трафик после действий пользователей | Статус эксперимента до даты окончания | Статус эксперимента в дату окончания | |||||
| Действие пользователя | Контрольная | Экспериментальная | Контрольная | Экспериментальная | ||||
| Приостановка любой кампании | Приостановлена | Активна | 0 % | 100 % | Приостановлен | Если автоматическое применение включено и экспериментальная группа получила положительные результаты, эксперимент получит статус "Запущен". В противном случае он получит статус "Завершен". | ||
| Активна | Приостановлена | 100 % | 0 % | Приостановлен | ||||
| Приостановка обеих кампаний | Приостановлена | Приостановлена | 0 % | 0 % | Приостановлен | |||
| Удаление любой кампании | Удалена | Активна | 0 % | 100 % | Запущен | |||
| Активна | Удалена | 100 % | 0 % | Завершен | ||||
| Удаление обеих кампаний | Удалена | Удалена | 0 % | 0 % | Завершен | |||
Как применить или завершить эксперимент
Чтобы применить результаты эксперимента к кампании или завершить его, нажмите кнопку "Применить" или "Завершить" в правом нижнем углу карточки "Сводка по эксперименту" (над временной диаграммой).
Проверьте или внесите изменения в сравниваемую кампанию
По умолчанию похожие кампании не включаются в отчеты. Вы не увидите там их данных, если только не примените нужные настройки в Google Рекламе.
Во время эксперимента вы должны сами вносить изменения в список кампаний для сравнения, иначе Google выберет такие кампании за вас. По окончании эксперимента вы больше не сможете добавлять или удалять кампании для сравнения.
- Просмотр результатов в сравнении. Чтобы вам было проще сравнивать результаты экспериментальной и похожих на нее кампаний, включите настройку "Сравнивать результаты с сопоставимыми кампаниями" в отчетах Google Рекламы.
- Выбор кампаний для сопоставления. У вас есть полный контроль над тем, какие кампании использовать для сравнения в ходе эксперимента. Достаточно изменить выбор кампаний в настройках. Если вы не сделаете этого, Google подберет кампании автоматически. По окончании эксперимента вы не сможете добавлять в отчет или удалять оттуда кампании для сравнения.