Přehled
Cenové experimenty umožňují provádět A/B testy a na základě jejich výsledků sebejistě a přesně přizpůsobovat ceny aplikace podle kupní síly na různých trzích po celém světě. Pomocí cenových experimentů můžete také testovat různé stanovené ceny proti kontrolní ceně na hlavních trzích a získat tak vyšší tržby. Nastavením optimálních cen u produktů v aplikaci v různých zemích/oblastech zaručíte, že pro aplikaci budete používat nejlepší cenovou strategii, abyste mohli nadále zvyšovat tržby a získávat nové uživatele. Vzhledem k tomu, že tato funkce vychází z cen a prodejů produktů v aplikaci, mohou používat pouze obchodníci z řad vývojářů.
Příprava a spuštění cenového experimentu
V níže uvedených sekcích najdete pokyny a důležité informace o přípravě a spouštění cenových experimentů a výkladu jejich výsledků.
Než začnete
Než ve službě Play Console začnete nastavovat cenový experiment, rozbalte jednotlivé sekce níže a přečtěte si je.
Předpoklady- Při experimentech můžete použít pouze aktivní produkty v aplikaci.
- K používání cenových experimentů musí mít uživatel oprávnění ke správě přítomnosti v Obchodě a zobrazení finančních údajů.
Obecné informace
- Experimenty jsou k dispozici pouze na úrovni aplikace. V několika aplikacích naráz je spouštět nelze.
- Maximální délka experimentu je šest měsíců. Poté se ceny vrátí na původní cenu. Ceny se vrátí na původní cenu také za 14 dní po dosažení statisticky významného výsledku.
- V jednom experimentu můžete otestovat maximálně 1000 produktů v aplikaci.
- Minimálně 30 dnů po skončení původního experimentu nemůžete spustit stejný experiment s překrývajícími se produkty v aplikaci a zeměmi.
- Experimenty nelze pozastavit. Můžete je pouze spustit, nebo zcela zastavit. Zastavený experiment nelze znovu zahájit.
Omezení týkající se zemí/oblastí
- V určité zemi/oblasti můžete mít v jednu chvíli spuštěný jen jeden experiment. Pokud již například máte spuštěný experiment v Norsku, nelze tam spustit další experiment s jinými produkty, dokud první experiment neukončíte a nevytvoříte jiný.
- Testovaná cena musí spadat do stanovených cenových rozsahů pro nákupy v aplikacích. Pokud se procentuální podíl ceny nachází mimo stanovené rozmezí pro danou zemi/oblast, automaticky se zastaví na hraniční hodnotě.
- U každého experimentu můžete mít maximálně dvě varianty cen a jednu kontrolní verzi.
- Experimenty jsou implementovány pouze ve vybraných zemích/oblastech, nikoli v jejich přidružených oblastech s jinou daňovou sazbou. Pokud jste například spustili experiment ve Francii, nejsou zahrnuta přidružená francouzská teritoria (Francouzská Guyana, Francouzská Polynésie, Guadeloupe, Martinik, Mayotte, Nová Kaledonie, Réunion, Svatý Bartoloměj, Svatý Martin, Saint Pierre a Miquelon a Wallis a Futuna).
Změny v produktech v aplikaci
- Cenu produktu v aplikaci, který je součástí probíhajícího experimentu, nelze změnit. Pokud chcete změnit cenu, je třeba experiment zastavit. Poznámky:
- Jedinou výjimkou jsou případy, kdy máte spuštěné dva experimenty a využijete výsledky z prvního experimentu. Případně pokud je váš produkt v aplikaci propojen s šablonou cen, můžete ceny produktů v aplikaci změnit pouze pro země, kde experiment není spuštěn.
- Pokud během aktivního experimentu nakonfigurujete nový produkt v aplikaci, bude z experimentu vynechán.
Spouštění experimentů a využívání výsledků
- Experimentální ceny můžete nastavit kdykoli. Doporučujeme však počkat, dokud výsledky nebudou statisticky významné, a použít pouze změny cen, které dosahují lepších výsledků než kontrolní skupina.
- Do probíhajícího experimentu nemůžete přidat další země/oblasti ani produkty.
- Pokud je jeden nebo více produktů propojeno se šablonou cen, použitím cen aktualizujete ceny pro země/oblasti experimentu a příslušné produkty odpojíte od šablony.
V experimentech se často používá terminologie ze statistiky. Pokud uvedené výrazy neznáte, doporučujeme vám prostudovat si níže uvedený glosář.
| Výraz | Definice | Poznámky |
|---|---|---|
| Interval spolehlivosti |
Rozsah hodnot vyjadřující nejistotu ohledně toho, zda je výsledek statisticky významný. |
Jedná se o hlavní ukazatel sloužící k výkladu výsledku experimentu. Statistická významnost se stanovuje, když interval spolehlivosti neprotíná nulu. Během prvních pár dnů se tento údaj kvůli nízkému objemu datnemusí zobrazovat. |
| Hladina spolehlivosti |
Pravděpodobnost, se kterou je zjištěný rozdíl mezi variantou a kontrolní verzí pravdivý. Příklad: Úroveň spolehlivosti 90 % znamená, že v 10 % případů bude zjištěný rozdíl nejspíš způsoben náhodou. Jinak řečeno, existuje méně než 10% pravděpodobnost, že data zjištěná v rámci testu by byla zjištěna i v případě, že mezi kontrolní verzí a variantou není žádný rozdíl. |
|
| Kontrolní verze | Původní testovaná proměnná (obsahující položku v aplikaci s původní cenou) v experimentální skupině. | Cena kontrolní verze se bude zobrazovat části publika experimentu definovaného během nastavení a všem uživatelům mimo experiment. |
| Výsledek experimentu | Výsledek vašeho experimentu. | Možné výsledky experimentu jsou uvedeny v následující části. |
| Falešně pozitivní | Když je negativní událost chybně vyložena jako pozitivní. |
Pokud zjistíme, že rozdíl útraty mezi testovací a kontrolní verzí je statisticky významný (pozitivní), ale rozdíl útraty mezi kontrolní a testovací verzí ve skutečnosti není statisticky významný (negativní), bude považován za falešně pozitivní. Míra falešně pozitivních výsledků je poměr počtu falešně pozitivních výsledků k celkovému počtu skutečně negativních událostí. |
| Produkty v aplikacích |
Položky, za které uživatelé platí jednorázový poplatek. Produkty v aplikacích mohou zahrnovat položky, jako jsou virtuální zboží (například herní úrovně nebo lektvary) nebo prémiové služby v aplikaci na Google Play. |
Můžete zvolit jeden nebo více různých produktů v aplikaci, přičemž maximální počet je 2000. Obecně platí, že více dat znamená méně času na zjištění rozdílu mezi kontrolní verzí a variantou, pokud mezi nimi nějaký rozdíl je. Experimentování se změnou ceny u mnoha produktů může snížit potenciální možnost kanibalizace. |
| Minimální zjistitelný účinek (MDE) |
Hodnota stanovená při nastavování experimentu, která určuje úroveň zlepšení, již má experiment zaznamenat. Můžete to brát tak, že určujete citlivost experimentu, která ovlivní odhadovanou dobu dosažení statistické významnosti. Jakmile zvolíte MDE, uvidíte odhad doby potřebné k dosažení statisticky významného výsledku, který vychází z historických dat vašeho výběru. Například nižší MDE znamená citlivější experiment, což vede k delší odhadované době potřebné pro výpočet statistické významnosti. |
|
| Efekt novosti | Fenomén, ve kterém uživatelé mohou preferovat nebo vyzkoušet novou funkci (například nový produkt nebo cenu) dokonce i v případě, že funkce není lepší nebo atraktivnější než původní. V tomto případě obvykle nárůst postupně ustává. | K efektu novosti může docházet u rychle skončených experimentů. Pokud tento efekt chcete zohlednit, doporučujeme využívat dobu pro výpočet statistické významnosti v řádu týdnů. |
| Statistická významnost | V případě A/B testu se jedná o stanovení, zda je rozdíl mezi kontrolní verzí a variantou skutečný nebo náhodný. |
Pokud interval spolehlivosti ve výsledku neobsahuje hodnotu nula, považujeme ho za statisticky významný. Výsledkem se v našem případě rozumí rozdíl mezi útratou za kontrolní verzi a variantu. Vizuální příklady intervalů spolehlivosti najdete níže v sekci Časté dotazy. |
| Varianta | Varianta původní testované proměnné v experimentální skupině. | Variantou je buď zvýšení ceny, nebo snížení ceny položky v aplikaci s původní cenou. |
Nastavení experimentu
Při nastavování experimentu doporučujeme, abyste do něj zahrnuli všechny zaměnitelné produkty v aplikaci (například herní měnu), aby se omezila možnost kanibalizace.
Pokud pracujete s nízkým objemem dat, pravděpodobně nebudete mít k dispozici dostatek dat, ze kterých bude možné vyvodit závěr experimentu. Pokud například spouštíte experiment s novým produktem, může dojít k nepřesnosti v odhadované délce experimentu nebo upozorněních. V takovém případě se vám ve službě Play Console může zobrazit upozornění, že ve vybraném období je předpovídán velmi nízký objem dat. Pokud se vám zobrazí zpráva o nízkém objemu dat, je možné, že ke spuštění experimentu nemáte dostatek dat nebo bude třeba doladit parametry experimentu. Zde je několik doporučených kroků k odstraňování problémů s nízkým objemem dat.
Naopak, pokud máte spuštěn delší experiment, je důležité vzít v úvahu, že na výsledky mohou mít vliv ekonomickými faktory, jako je globální kolísání měny v průběhu času.
Část 1: Zadání podrobností
Podrobnosti experimentu přidáte takto:
- Otevřete službu Play Console a přejděte na stránku Cenové experimenty (Zpeněžení > Cenové experimenty).
- Klikněte na Vytvořit experiment.
- V části „Zadejte podrobnosti“ zadejte název experimentu a krátký popis experimentu (volitelný).
- Poznámka: Název experimentu ani krátký popis se uživatelům nezobrazí.
- Vyberte země/oblasti, ve kterých chcete experiment spustit.
- Důležité: Cenové experimenty jsou implementovány pouze ve vybraných zemích/oblastech, nikoli v jejich přidružených lokalitách. Pokud například vyberete Francii, cenové experimenty budou implementovány pouze ve Francii, nikoli v přidružených teritoriích, jako je Francouzská Guyana.
- V rozbalovací nabídce Produkty vyberte produkty v aplikaci, se kterými chcete experimentovat. Rozbalovací nabídka uvádí názvy, identifikátory a ceny dostupných produktů v aplikaci.
- Důležité: Pokud zvolíte produkt v aplikaci, který je propojen se šablonou cen, příslušná šablona cen bude po dobu trvání cenového experimentu uzamčena.
- Vyberte datum zahájení. Experiment začne v 0:00 pacifického času ve vybraný den. Spuštění experimentu můžete naplánovat do budoucna.
- Kliknutím na Další pokračujte v nastavení experimentu přidáním variant.
Pokud na základě zadaného nastavení experimentu předpokládáme, že objem dat bude příliš nízký na to, aby bylo možné dosáhnout statistické významnosti, zobrazí se upozornění. V takovém případě doporučujeme provést úpravy, abyste měli jistotu, že shromáždíte dostatek dat k dosažení statistické významnosti. Další postup najdete v doporučených krocích pro malé objemy dat.
Doporučený postup pro malé objemy datNásledující doporučení vám pomohou změnit objem dat potřebný k dosažení statistické významnosti, aby byla doba trvání experimentu kratší.
|
Krok nastavení experimentu |
Doporučené opatření |
|---|---|
| Část 1: Zadání podrobností | Zvyšte počet zemí/oblastí v experimentu. |
| Část 1: Zadání podrobností | Otestujte všechny produkty v aplikaci nebo zvyšte počet produktů v aplikaci. |
| Část 2: Přidání variant | Snižte počet variant ze dvou na jednu. |
| Část 2: Přidání variant |
Experimentujte se snížením ceny o více procent (nižší cena). Poznámka: Nijak to neovlivní úvodní odhad, ale pomůže to při aktivním experimentu. |
| Část 3: Správa nastavení | Zvyšte velikost publika ve variantě (například 50 % kontrolní verze a 50 % všechny varianty). |
| Část 3: Správa nastavení |
Zvyšte minimální zjistitelný účinek. Poznámka: Vztahuje se pouze na experimenty, ve kterých měly varianty i kontrolní verze stejný výsledek. |
| Část 3: Správa nastavení | Snižte hladinu spolehlivosti. |
Část 2: Přidání variant
V sekci „Přidejte varianty“ můžete přidat nebo odstranit varianty cen. Cenový experiment musí mít alespoň jednu variantu. Postup přidání variant:
- V rozbalovací nabídce vyberte Zvýšit cenu nebo Snížit cenu a zadejte procento, které chcete použít. Upozornění:
- Musíte zadat celé číslo.
- Pokud zvolíte možnost Snížit cenu, musíte zadat hodnotu mezi 1 a 99.
- Pokud zvolíte možnost Zvýšit cenu, musíte zadat hodnotu mezi 1 a 999.
- Po přidání varianty bude na stránce uveden cenový rozsah kontrolní verze a cenový rozsah varianty. Kliknutím na Zobrazit ceny produktů zobrazíte další podrobnosti, včetně názvů a ID produktů, oblastí s jinou daňovou sazbou (pokud nějaké jsou) a daňových údajů. Uvidíte zde skutečné procentuální změny ceny po započtení směnného kurzu a cenových zvyklostí v příslušných zemích.
- Pokud do experimentu chcete zahrnout více variant, klikněte na + Přidat další variantu a opakujte výše uvedený postup. Na stránce bude uveden také cenový rozsah kontrolní verze a cenový rozsah variant.
- Kliknutím na Další pokračujte na doladění nastavení experimentu.
Část 3: Správa nastavení
V části „Spravovat nastavení“ můžete nastavit parametry cílení a experiment tak více vyladit. Postup správy nastavení experimentu:
- Zadejte publikum experimentu. Jedná se o procento uživatelů, kteří budou do experimentu zapojeni. Tito uživatelé budou rovnoměrně rozděleni mezi varianty a kontrolní verzi. Připomínáme, že původní cenu neboli cenu kontrolní verze uvidí také uživatelé mimo experiment, ale do analýzy experimentu nebudou zahrnuti.
- Poznámka: Musíte zadat celé číslo od 1 do 100.
- Zadejte hladinu spolehlivosti. Snížením hladiny spolehlivosti zvýšíte pravděpodobnost falešně pozitivního výsledku, ale zároveň zkrátíte dobu běhu experimentu.
- Zadejte minimální zjistitelný účinek. Udává úroveň zlepšení, kterou má experiment zaznamenat. Můžete to brát tak, že určujete citlivost experimentu. Bude mít vliv na odhadovanou dobu dosažení statistické významnosti.
- Vylaďte experiment upřesněním parametrů cílení. Můžete také zobrazit odhadovanou dobu do výpočtu statistické významnosti, která poslouží jako vodítko vycházející z vašeho nastavení.
Část 4: Spuštění experimentu
Nyní jste připraveni experiment spustit. Během experimentu se ceny vybraných produktů v aplikaci v zemích/oblastech budou měnit. Experiment můžete kdykoli ukončit.
- Před spuštěním experimentu se ujistěte, že rozumíte následujícím aspektům:
- Experiment může ovlivnit tržby aplikace. Upozorňujeme, že bez statisticky významného výsledku nemusí mít negativní ani pozitivní výsledek tržeb žádnou výpovědní hodnotu. Proto doporučujeme, abyste počkali, než dosáhnete statistické významnosti.
- V průběhu experimentu nebudete moci upravovat ceny vybraných produktů v aplikaci.
- Použití výsledků experimentu bude mít vliv na všechny zahrnuté země/oblasti a produkty v aplikaci.
- Klikněte na Potvrdit a spustit.
Volitelné: Ukončení experimentu
Experiment můžete ukončit kdykoli.
- Otevřete službu Play Console a přejděte na stránku Cenové experimenty (Zpeněžení > Cenové experimenty).
- Otevřete experiment, který chcete ukončit.
- Klikněte na Ukončit experiment.
Po skončení experimentu se experimentální ceny vrátí na původní cenu produktů v aplikaci v příslušných zemích/oblastech. Experiment ani analýza již nebudou aktivní.
Pokud jste naplánovali budoucí experiment, můžete podle výše uvedených pokynů zrušit i ten. Experimenty zrušené do 24 hodin před plánovaným datem zahájení se v některých případech mohou dočasně spustit.
Zobrazení výsledků experimentu a použití variant
Je důležité, abyste znali možné závěry experimentu a jejich význam pro vaši aplikaci a její cenovou strategii. Než výsledky použijete, pečlivě si přečtěte tuto část.
Zobrazení a analýza výsledků experimentu
Pokud budou výsledky považovány za statisticky významné, budou zpřístupněny na stránce analýzy experimentu a upozorníme vás prostřednictvím zprávy do doručené pošty.
Zobrazení výsledku
Pokud si chcete prohlédnout výsledek a analýzu, přejděte do experimentu. Přejděte na stránku Cenové experimenty (Zpeněžení >Cenové experimenty) a kliknutím na šipku doprava vedle experimentu zobrazte stránku s analýzou experimentu.
Výsledek se zobrazí v horní části stránky. Rozbalením sekce Možné výsledky experimentu zobrazíte různé výsledky a jejich význam. Pod výsledkem experimentu je k dispozici krátký popis, který vysvětluje výsledek. Může se vám například zobrazit výsledek „Nejlepších výsledků dosáhla varianta [X]“, pod nímž bude uvedeno krátké vysvětlení, které může znít třeba takto: „Varianta [X] dosáhla nejvyšších tržeb.“ V takovém případě, kdy varianta vyrovná nebo překoná kontrolní verzi, můžete kliknutím na Použít variantu [X] použít variantu a podle ní také odpovídajícím způsobem aktualizovat ceny produktů v aplikaci. Další informace najdete v článku Použití variant.
Poznámka: Experimenty automaticky končí 14 dní po určení výsledku, případně je můžete ukončit okamžitě kliknutím na Ukončit experiment.
Zobrazení podkladových dat
Pod výsledkem je zobrazena tabulka s daty, z nichž statistický výsledek vychází. V tabulce jsou uvedeny varianty, tržby, tržby oproti kontrolní skupině (a procentuální rozdíl tržeb oproti kontrolní skupině) a interval spolehlivosti variant. Pokud se chcete seznámit s různými metrikami na stránce analýzy experimentu, rozbalte sekci Definice metrik.
Pod tabulkou v části „Podkladová data“ najdete podrobnější data. Ve výchozím nastavení jsou v grafu zobrazeny informace o tržbách oproti kontrolní skupině k poslednímu dostupnému datu. V tomto zobrazení představuje stínovaná oblast interval spolehlivosti. Z grafu zjistíte, jak se interval spolehlivosti měnil v průběhu času. Vybrané trvání a data můžete upravit pomocí filtrů trvání a dat v pravém horním rohu grafu.
Pomocí filtru metrik v levém horním rohu grafu můžete zobrazit také následující metriky: Tržby, Objednávky, Kupující, Poměr kupujících, Průměrné tržby za platícího uživatele (tyto metriky jsou popsány také v sekci Definice metrik). Pokud zvolíte jinou metriku, v grafu se nezobrazí interval spolehlivosti, protože je založen na tržbách.
Pokud chcete zobrazit další podrobnosti na úrovni produktů, můžete výsledky experimentu exportovat jako soubor CSV. Pole, formát a příklady exportovaného souboru CSV můžete zobrazit rozbalením sekce Definice metrik (export CSV).
Použití variant
Než variantu použijete, vezměte na vědomí následující skutečnosti:
- Pokud je jeden nebo více produktů v aplikaci propojeno se šablonou cen, použitím varianty aktualizujete ceny pro země/oblasti experimentu a příslušné produkty v aplikaci odpojíte od šablony.
- Variantu lze použít pouze pro všechny produkty v aplikaci a země/oblasti v experimentu. Statistickou významnost vypočítáváme v rámci celého nastavení a nelze proto zaručit stejný výsledek a efekt, pokud by varianta byla použita pouze na část zadaných zemí/oblastí a produktů v aplikaci.
Pokud varianty dorovnaly nebo překonaly výkon kontrolní verze, můžete cenu aktualizovat použitím varianty:
- Otevřete službu Play Console a přejděte na stránku Cenové experimenty (Zpeněžení > Cenové experimenty).
- Vedle varianty, kterou chcete použít, klikněte na Použít variantu.
Ceny aplikace se aktualizují podle konfigurace ve variantě. Experiment automaticky skončí 14 dní po určení výsledku, případně ho můžete ukončit okamžitě kliknutím na Ukončit experiment.
Možné výsledky experimentuExperiment může mít několik výsledků. Výsledek experimentu určuje, jak budete dál postupovat.
| Výsledek experimentu | Význam | Poznámky/doporučení |
|---|---|---|
| Nejlepších výsledků dosáhla varianta [X] | Varianta [X] dosáhla statisticky významného výsledku s největším nárůstem tržeb. | Použijte variantu [X], protože má výrazně lepší výkon než kontrolní verze a ostatní varianty. |
| Obě varianty měly lepší výkon než kontrolní verze | Obě varianty dosáhly vyšších tržeb než kontrolní verze. Podívejte se na výsledky a rozhodněte se, kterou variantu použijete. | O použité variantě se rozhodněte sami. |
| Varianty a kontrolní verze dosáhly stejných výsledků | Žádná varianta nedosáhla vyšších tržeb než kontrolní verze. | Experiment shromáždil dostatek dat a varianty i kontrolní verze dosáhly stejných výsledků. |
| Nejlepších výsledků dosáhla kontrolní verze | Kontrolní verze dosáhla vyšších tržeb než obě varianty. | Tento výsledek naznačuje, že aktuální stanovené ceny pro země a produkty experimentu již jsou optimální. U produktů a zemí experimentu nadále používejte cenu kontrolní verze. |
| Je potřeba více dat | Experiment probíhá. K získání statisticky významného výsledku je potřeba více dat. | Další kroky najdete v doporučeném postupu v případě nízkého objemu dat. |
| Neprůkazný výsledek | Experiment byl předčasně zastaven nebo dosáhl maximální délky trvání 6 měsíců. K získání statisticky významného výsledku je potřeba více dat. Zkuste spustit nový experiment s jiným nastavením. | Další kroky najdete v doporučeném postupu v případě nízkého objemu dat. Může to znamenat, že kupující se o ceny produktů v aplikaci v zemích/oblastech experimentu nezajímají. |
V této tabulce najdete metriky ze stránky analýzy experimentu.
| Metrika | Definice |
|---|---|
| Tržby ze všech produktů | Hrubé tržby od uživatelů experimentu, kteří zakoupili produkty v aplikaci v rámci experimentu a mimo něj, za určité časové období. |
| Průměrné tržby na platícího uživatele (ARPPU) | Celkové hrubé tržby z produktů v aplikaci vydělené počtem unikátních kupujících (uživatelů, kteří provedli alespoň jeden nákup produktů v aplikaci v rámci experimentu i mimo něj) ve stanoveném období experimentu. Tato metrika vám pomůže zjistit hodnotu kupujících pro vaši firmu. |
| Poměr kupujících (za 28 dní) |
Procento aktivních uživatelů za měsíc, kteří během experimentu uskutečnili alespoň jeden nákup produktu v aplikaci, včetně produktů v aplikaci mimo experiment. Poznámka: Tato metrika je klíčem k pochopení konverzí kupujících a rozšiřování platící uživatelské základny. |
| Kupující | Unikátní uživatelé, kteří ve stanoveném období zakoupili alespoň jeden produkt v aplikaci za experimentální cenu. |
| Tržby z nových instalací | Hrubé tržby od uživatelů, kteří si aplikaci poprvé nainstalovali do libovolného zařízení po datu zahájení experimentu a poprvé se jim zobrazila experimentální cena. Upozorňujeme, že někteří uživatelé se od sdílení těchto dat s Googlem mohou odhlásit. |
| Objednávky | Počet nákupů produktů v aplikaci zapojených do experimentu, uskutečněných během experimentu za stanovené období. |
| Tržby | Hrubé tržby od uživatelů experimentu, kteří v rámci experimentu zakoupili produkty v aplikaci, za stanovené období. |
Tato tabulka uvádí pole, formát a příklady definic metrik exportovaných jako soubor CSV.
|
Pole |
Formát | Příklady a poznámky |
|---|---|---|
| Datum | Textový řetězec |
Datum objednávek v pacifickém časovém pásmu (ve formátu MMM DD, RRRR). |
| ID SKU | Textový řetězec |
Jedinečný identifikátor produktu v aplikaci zadaný vývojářem. |
| Název produktu | Textový řetězec |
Název produktu v aplikaci zadaný vývojářem. |
| Země | Textový řetězec |
Jedinečný kód země pro relevantní metriky produktů v aplikaci. |
| Experimentální skupina | Textový řetězec |
Experimentální skupina pro relevantní metriky produktů v aplikaci. |
| Měna vývojáře |
Textový řetězec |
Měna, ze které byly objednávky převedeny. Jedná se o místní měnu, ve které dostáváte platby. |
| Tržby | Numerický |
Celkové hrubé tržby ze stanoveného produktu v aplikaci vzhledem k datu, zemi a experimentální skupině. |
| Tržby z nových instalací | Numerický |
Hrubé tržby od uživatelů, kteří si aplikaci poprvé nainstalovali do libovolného zařízení po datu zahájení experimentu a poprvé se jim zobrazila experimentální cena (vzhledem ke stanovenému produktu v aplikaci, datu, zemi a experimentální skupině). Upozorňujeme, že někteří uživatelé se od sdílení těchto dat s Googlem mohou odhlásit. |
| Objednávky | Numerický |
Celkový počet objednávek stanoveného produktu v aplikaci vzhledem k datu, zemi a experimentální skupině. |
| Kupující | Numerický |
Celkový počet kupujících stanoveného produktu vzhledem k datu, zemi a experimentální skupině. Kupující jsou uživatelé, kteří během experimentu zakoupili konkrétní produkt v aplikaci. |
Časté dotazy
Ve kterých zemích/oblastech mohu spouštět experimenty?V zemích/oblastech lze experimenty s cenami použít pouze v případě, že splňují následující kritéria:
- Jedná se o zemi/oblast, ve které jste už publikovali vydání (včetně kanálů interního testování).
- Jedná se o zemi/oblast, která podporuje místní měnu.
Pokud je objem dat velmi nízký, nejsou k dispozici žádná data. Některé údaje na stránce analýzy experimentu navíc mohou být zobrazeny s až sedmidenní prodlevou.
Ano. Pokud spustíte experiment s produktem v aplikaci, který je propojen se šablonou cen, ceny v zemích/oblastech zařazených do experimentu budou po dobu trvání experimentu uzamčeny. Stále však můžete měnit ceny v ostatních zemích/oblastech.
Pokud se na konci experimentu rozhodnete použít nové ceny, všechny produkty v aplikaci zařazené do experimentu budou odpojeny od přidružených šablon cen a šablona cen se nezmění. Pokud chcete použít výsledky experimentu, aniž byste produkty v aplikaci odpojili od šablon cen, přejděte přímo na stránku Šablony cen (Nastavení) > Šablony cen) a ceny tam aktualizujte.
Další informace najdete v šablonách cen.
Ne. Ceny experimentů lze testovat pouze v rozsahu minimální a maximální ceny stanoveném pro příslušnou zemi/oblast. Když během nastavování experimentu zadáte změnu ceny a tato nová cena překročí některý z limitů, bude automaticky nastavena na minimální nebo maximální cenu. Seznam cenových rozsahů a měn povolených v jednotlivých zemích najdete v článku Podporované lokality pro distribuci uživatelům Google Play.
Ne. Cenové experimenty můžete spouštět, pokud máte integrovanou kteroukoli verzi fakturačního systému Google Play.
Všechny objednávky v rámci experimentu lze zobrazit v měsíčních finančních přehledech ke stažení (přehled odhadovaných prodejů a přehled příjmů). U zemí/oblastí, ve kterých máte spuštěn cenový experiment, uvidíte, které produkty v aplikaci zařazené do experimentu byly zakoupeny za cenu kontrolní verze a za cenu varianty.
Kvůli zajištění smysluplných výsledků nedoporučujeme spouštět žádné souběžné experimenty A/B. Platforma Firebase například funguje nezávisle na cenových experimentech ve službě Play Console a případné narušení konkrétních produktů v aplikaci může mít vliv na spolehlivost výsledků experimentu.
K výpočtu intervalu spolehlivosti používáme nástroj jackknife (statistický nástroj, který umožňuje odhadovat rozptyl prostřednictvím převzorkování) a poté používáme smíšené sekvenční testování pravděpodobnosti ke kontrole zvýšené míry falešně pozitivních výsledků vzniklé nepřetržitým monitorováním. Statistická významnost se stanovuje, když interval spolehlivosti neprotíná nulu.
K používání cenových experimentů musíte mít oprávnění ke správě přítomnosti v Obchodě a zobrazení finančních údajů.
Experiment automaticky skončí 14 dní po dosažení statistické významnosti nebo v případě maximálního trvání po dobu šesti měsíců. Experiment neukončujeme po uplynutí odhadované doby trvání stanovené při nastavování experimentu, ale poté, co zjistíme dosažení statisticky významného rozdílu. Na použití nových cen máme 14 dní, poté se ceny vrátí na původní hodnotu.
Ne. Po dobu trvání experimentu uvidí uživatel pouze jednu cenu.
Ne, protože experiment už začal shromažďovat výsledky na základě parametrů, které jste původně zvolili. Můžete buď souběžně spustit další experiment, do kterého vyberete další země/oblasti, nebo můžete aktuální experiment ukončit a nastavit nový. Upozorňujeme, že pokud se produkty v aplikaci a země/oblasti budou překrývat, budete muset před spuštěním nového experimentu počkat 30 dní.
Statistická významnost se vypočítává s ohledem na všechny země/oblasti v kombinaci s produkty zařazenými do experimentu, nikoli samostatně pro každou kombinaci. Pokud chcete upravit ceny v konkrétní zemi/oblasti, doporučujeme v nastavení experimentu vybrat pouze příslušnou zemi/oblast.
Ano. Variantu můžete použít i poté, co se ceny vrátí na původní hodnotu.
Jestliže vaše produkty v aplikaci negenerují tržby, které se výrazně liší od kontrolní verze, nebo není k dispozici dostatek dat, výsledek je považován za neprůkazný. Může k tomu dojít, když kupující změna ceny nezajímá.
Větší vzorky obvykle mají větší výpovědní hodnotu. Pokud samostatný produkt v aplikaci, který chcete testovat, patří u mnoha kupujících mezi nejoblíbenější produkty, může být vhodné otestovat ho samostatně. V opačném případě doporučujeme otestovat několik produktů v aplikaci společně, aby měl experiment větší výpovědní hodnotu.
Pokud máte několik produktů v aplikaci, které jsou do určité míry zaměnitelné (například 0,99 USD za 60 jednotek měny v aplikaci a 4,99 USD za 300 jednotek měny v aplikaci), doporučujeme vám otestovat oba produkty v aplikaci, abyste se vyhnuli kanibalizaci.
Obecně doporučujeme používat experimenty s jednou variantou, při kterých budou v kontrolní verzi produkty v aplikaci s původní cenou a variantou budou zlevněné produkty v aplikaci. Dvouvariantní experiment obsahuje produkty v aplikaci s původní cenou jako kontrolní skupinu a stejné produkty v aplikaci ve dvou různých cenových hladinách. Interpretace výsledků z takových experimentů může být obtížná a může trvat déle než u experimentů s jednou variantou.
Pokud interval spolehlivosti ve výsledku neobsahuje hodnotu nula, považujeme ho za statisticky významný. Výsledkem se v našem případě rozumí rozdíl mezi útratou za kontrolní verzi a variantu.
Zde je příklad intervalu spolehlivosti, který může být vyložen jako pozitivní výsledek:
Zde je příklad intervalu spolehlivosti, který může být vyložen jako negativní výsledek:
Zde je příklad intervalu spolehlivosti, který může být vyložen jako neprůkazný výsledek vyžadující více dat:
Ano, u uživatelů neustále sledujeme spoofing polohy a přijímáme opatření ke zmírnění dopadu na naše vývojáře a jejich produkty.
Související obsah
- Přečtěte si další informace o cenových experimentech a souvisejících funkcích.
- Zapojte se do kurzu cenových experimentů v Google Play Academy.