V tomto článku preberáme osvedčené postupy pre experimenty na zlepšenie aplikácie.
Na tejto stránke
- Pred vytvorením nového experimentu
- Nastavenie experimentu
- Počas prevádzky experimentu
- Po skončení experimentu
Pred vytvorením nového experimentu
Ako experiment na zlepšenie aplikácie rieši vaše prípady použitia
Čo je experiment na zlepšenie aplikácie? Experimenty na zlepšenie aplikácie vám umožňujú experimentovať a zistiť, ako zvýšiť výkonnosť pridaním videí do existujúcej kampane.
-
Pri používaní experimentu na zlepšenie aplikácie odporúčame postupovať na základe vašich prípadov použitia:
- Vyskúšajte prvýkrát video: ak v kampani zatiaľ nemáte video, môžete pomocou experimentu na zlepšenie aplikácie zistiť, aký je možný vplyv videa na zvýšenie výkonnosti.
- Vyberte najlepšie z niekoľkých videí na základe orientačných výsledkov: ak máte viacero videí, experiment na zlepšenie aplikácie vám pomôže zistiť:
- či pomôžu výkonnosť zlepšiť všetky videá dohromady,
- ako jednotlivé videá orientačne prispievajú k celkovému nárastu výkonnosti.
Minimálny rozpočet a ponuka
Odporúčame nastaviť rozpočet a ponuku tak, aby kampaň získala aspoň 100 konverzií denne (ideálne viac ako 150) a naše modely tak mohli optimalizovať vaše kampane. Simulátory inteligentných ponúk vám pomôžu lepšie pochopiť, koľko konverzií pravdepodobne získate, keď zmeníte rozpočet a cieľ stratégie ponúk.
- Čím vyšší je denný počet konverzií v experimente, tým rýchlejšie experiment dosiahne štatisticky významné výsledky.
- Ak vaša základná kampaň obsahuje vysoký počet videí (viac než 50), bude na denné vyhodnocovanie jednotlivých podkladov potrebný pravdepodobne oveľa vyšší rozpočet.
Zacielenie stratégie ponúk kampane (cieľová cena za inštaláciu, cieľová cena za zapojenie, cieľová návratnosť výdavkov na reklamu)
Ak je vaša kampaň obmedzená rozpočtom, skontrolujte, či skutočná cena za inštaláciu (angl. cost-per-install) alebo cena za zapojenie (angl. cost-per-engagement) nie je viac než dvakrát nižšia než vaša cieľová cena za inštaláciu alebo cieľová cena za zapojenie (podobne skontrolujte cieľovú návratnosť výdavkov na reklamu). Vďaka tomu nedôjde k neočakávanému správaniu v prípade studeného štartu alebo zníženia ponúk.
Vo všeobecnosti platí, že kampane, ktoré nie sú obmedzené rozpočtom ani ponukami, dosiahnu výsledky rýchlejšie a tieto výsledky budú presnejšie.
Kontrola existujúcich videí
Ak má kampaň obmedzený rozpočet
- Ak vaša aktuálna kampaň neobsahuje žiadne videá alebo videá má, no nemíňa na ne rozpočet, experimenty s pridaním nových videí pravdepodobne neprinesú zvýšenie výkonnosti.
- Zvážte zvýšenie rozpočtu kampane tak, aby nebola obmedzená, a potom skúste spustiť experiment na zlepšenie výkonnosti.
Ak kampaň nemá obmedzený rozpočet
- Ak vaša aktuálna kampaň obsahuje videá, ktoré tvoria len malé percento celkových výdavkov kampane, pridanie nových videí zrejme nepovedie k zvýšeniu výkonnosti.
- Zvážte zvýšenie cieľovej ceny za konverziu (alebo zníženie cieľovej návratnosti výdavkov na reklamu), kým existujúce videá neminú zmysluplnú sumu výdavkov. Potom vyhodnoťte, či potrebujete experiment na zlepšenie výkonnosti.
Nastavenie experimentu
Ciele experimentu
- Uprednostnite také metriky experimentu, ktoré sú v súlade s cieľmi optimalizácie kampane.
- Ak sa napríklad vaša kampaň optimalizuje na získavanie inštalácií, vyberte objem alebo cenu za inštaláciu.
- Ak vaša kampaň nie je obmedzená rozpočtom, uprednostnite cenu za akciu (inštaláciu alebo akciu v aplikácii) pred metrikami objemu konverzií.
Experimentálna testovacia skupina
- Vo väčšine prípadov odporúčame použiť rozdelenie návštevnosti a rozpočtu 50 na 50. Dosiahnete tak najrýchlejšie možné výsledky experimentu pri najnižších nákladoch.
- V určitých situáciách, ak sa napríklad domnievate, že testované podklady budú mať veľký negatívny vplyv, môže byť vhodné použiť iné rozdelenie návštevnosti (napríklad 40 % pre skúšobnú kampaň a 60 % pre základnú kampaň).
Úroveň spoľahlivosti
- Odporúčame použiť úroveň spoľahlivosti 80 %, ktorá zvyčajne poskytuje dobrú presnosť výsledkov experimentu s kratším trvaním a nižšou cenou v porovnaní s úrovňou spoľahlivosti 85 % alebo 95 %.
- Ak máte pochybnosti, ktorú úroveň spoľahlivosti by ste mali vybrať pre experiment, pomocou tabuľky v prílohe môžete zistiť, koľko konverzií budete potrebovať na dosiahnutie danej úrovne spoľahlivosti.
Dátumy experimentu
- Ak je to možné, odporúčame vám ponechať experimenty v prevádzke 30 dní. Maximalizujete tak šancu získať presvedčivé výsledky experimentu.
Kontrola stavu experimentu
- Kontrola stavu obsahuje sériu diagnostík a kontrol na zvýšenie pravdepodobnosti získania presvedčivých výsledkov experimentu. Odporúčame vám vyriešiť závažné problémy (zobrazené červeno), napríklad používanie aplikácie pre iOS (momentálne nepodporované), a pokúsiť sa vyriešiť stredne závažné problémy (zobrazené žlto), napríklad obmedzené rozpočty. Ďalšie informácie o kontrole stavu vytvárania experimentov na zlepšenie aplikácie
Všeobecné odporúčania
Interakcie s inými kampaňami propagujúcimi rovnakú aplikáciu.
- Ak chcete predísť kanibalizácii kampane, nesmie byť v účte spustená iná kampaň propagujúca rovnakú aplikáciu v rovnakých geolokáciách ako testovaná kampaň.
Porušenia pravidiel
- Ak je to možné, vyriešte všetky prípadné porušenia pravidiel v kampani. Mohli by spôsobiť, že niektorá z kampaní nebude v experimente spustená, alebo oneskorenie výsledkov.
Počas prevádzky experimentu
Zmeny rozpočtu a cieľovej výkonnosti
- Odporúčame vám, aby ste tieto nastavenia počas prvých siedmich dní experimentu neaktualizovali.
- Ak je po tomto období potrebné vykonať nejaké zmeny, vykonávajte malé zmeny každý deň po malých krokoch.
Zmeny podkladov
- Ak potrebujete zmeniť podklad v základnej kampani, musíte rovnakú zmenu vykonať aj v zodpovedajúcej experimentálnej kampani.
Sledovanie experimentov
- Odporúčame z výsledkov vylúčiť prvých päť až desať dní experimentu (pomocou selektora dátumov), aby na metriky nemalo vplyv obdobie optimalizácie kampane.
- Výsledky experimentu môžete sledovať pomocou troch úrovní spoľahlivosti (80 %, 85 %, 95 %).
- Ak ste do skúšobnej kampane pridali viacero videí, môžete si pozrieť výkonnosť jednotlivých videí v reportoch v službe Google Ads.
Po skončení experimentu
Interpretácia výsledkov experimentu
- Štatisticky významné výsledky
- Pozitívne výsledky v prípade oboch cieľov experimentu: odporúčame podklad propagovať v základnej kampani a prípadne aj v ďalších kampaniach v účte (napríklad kampaniach s podobnými cieľmi, ale inou geografickou polohou). Dosiahnete tak lepšiu celkovú výkonnosť.
- Negatívne výsledky v prípade oboch cieľov experimentu: odporúčame vám podklad v kampani alebo účte nepropagovať.
- Kombinácia pozitívnych a negatívnych výsledkov z hľadiska cieľov experimentu: odporúčame vám rozhodnúť sa na základe potrieb vašej firmy a obmedzení návratnosti investícií. Ak sa napríklad cena za inštaláciu zvýši o 5 % a počet inštalácií o 10 %, mali by inzerenti podklady propagovať, ak im vyhovuje viac inštalácií pri menšom zvýšení priemernej ceny za inštaláciu.
- Štatisticky nevýznamné výsledky
- Odporúčame vám rozhodovať sa na základe potrieb vašej firmy a tolerancie voči rizikám. Podklady s pozitívnymi výsledkami, ktoré nie sú štatisticky významné, môžu napríklad propagovať inzerenti, ktorým stačia orientačné výsledky. Prípadne odporúčame zmeniť podklad a spustiť ďalší experiment.
