Анализирајте A/B тестирање и реагујте

Подаци се редовно ажурирају на страници групе за посредовање. У било ком тренутку током 90 дана можете да прекинете тестирање на основу доступних података и определите се за једну од варијанти. Када се определите за једну варијанту, то значи да сте једну од варијанти одабрали као конфигурацију групе за посредовање за 100% корисника. 

Да бисте приступили A/B тестирању и пратили га: 

1. Пријавите се на AdMob налог на https://apps.admob.com.
2. Кликните на Посредовање на бочној траци.
3. Изаберите групу за посредовање са A/B тестирањем које желите да видите.

Да би вам олакшао анализирање резултата A/B тестирања, AdMob извештава о скалираној месечној заради варијанте А и варијанте Б. Скалирана месечна зарада је процена износа који ћете зарадити у периоду од 28 дана ако примените варијанту на 100% корисника. Тиме се обезбеђује фер поређење и прецизнији увид у учинак сваке варијанте.

Напомена: AdMob почиње да израчунава скалирану месечну зараду 4 дана после покретања A/B тестирања и када достигнете 10.000 приказа.

У врху странице A/B тестирања можете да проверите разлику у скалираној месечној заради како бисте сазнали колико се варијанте разликују.

Видећете и процењену зараду, ефективну цену за хиљаду приказа и стопу подударања варијанте А и варијанте Б и ти подаци се ажурирају током тестирања. Ти подаци показују и учинак сваког извора огласа у свакој варијанти, па можете лако да поредите учинак извора огласа у обе варијанте.

Тумачење резултата

Када тестирање почне, AdMob пореди скалирану месечну зараду у обе варијанте да би утврдио која варијанта ће имати бољи учинак. AdMob приказује водећу варијанту на страници A/B тестирања када утврди да та варијанта константно има знатно бољи учинак од друге варијанте. Навешћемо и препоручену радњу: „Задржи оригинал“ (ако варијанта А има бољи учинак) или „Примени варијанту“ (ако варијанта Б има бољи учинак). 

Приказаћемо и колико је AdMob сигуран у водећу варијанту тако што ћемо навести процењену шансу у процентима, нпр. „99% (процењена) шанса да ће варијанта А имати бољи учинак од варијанте Б“. 

AdMob одређује водећу варијанту и процењену шансу у процентима помоћу следећих критеријума:

• Колико константно водећа варијанта има бољи учинак од друге варијанте. 
• Колика је разлика између обе варијанте. 
• Колико је података доступно. Препоручујемо вам да одаберете огласну јединицу са великим обимом саобраћаја да бисте повећали количину доступних података током тестирања. Имајте у виду да тест мора да прими најмање 10.000 захтева за огласе да би AdMob могао да утврди резултате.

Већа константност и разлика у учинку, као и велика количина података доприносе да AdMob повећа процењену шансу у процентима. 

Ако било који од ових критеријума није испуњен, AdMob неће моћи да одреди водећу варијанту. У том случају нећете видети коначне резултате на страници A/B тестирања. Међутим, и даље можете да видите показатеље из тестирања за сваку варијанту. 

Када расподелу корисника подесите на мање од 50%, подаци за варијанту Б се израчунавају скалирањем. То значи да се подаци пореде на фер начин јер AdMob израчунава податке за варијанту Б као да добија једнаку поделу корисника.

На пример, ако расподелу корисника за варијанту Б подесите на 10%, процењена зарада се скалира са 9. То вам омогућава фер поређење са варијантом А (која има расподелу корисника од 90%). Дакле, ако варијанта Б заради 10 USD, скалираним израчунавањем њен приход је 90 USD. 

Реагујте

Препоручујемо вам да тестирање траје најмање две недеље пре него што реагујете.Можете да се определите за једну од варијанти у било ком тренутку током 90 дана. Када се определите за једну варијанту, то значи да сте једну од варијанти одабрали као конфигурацију групе за посредовање за 100% корисника. Узмите у обзир разлику у процењеној заради и процењену шансу у процентима када се опредељујете за једну од варијанти. 

Можете да задржите варијанту А или примените варијанту Б: 

• Да бисте изабрали варијанту А, кликните на Задржи. То значи да задржавате оригиналну конфигурацију групе за посредовање.
• Да бисте изабрали варијанту Б, кликните на Примени. То значи да на налог примењујемо подешавања варијанте.

Ако се не определите за неку од варијанти до краја периода од 90 дана, тестирање се зауставља и варијанта А се користи за 100% корисника, чак и ако није била водећа у тестирању. 

Имате 30 дана од завршетка експеримента да одаберете варијанту, после чега тестирање истиче и варијанта Б се брише. 

Напомена: Више информација о A/B тестирању је доступно у извештају о посредовању.