Cenu eksperimentu veikšana, lai optimizētu lietotnēs ietverto produktu cenas

Rīkā Play Console varat veikt cenu eksperimentus, lai dažādotu cenu noteikšanas stratēģiju daudzsološiem tirgiem vai pārbaudītu dažādas izvēlētās cenas galvenajos tirgos un nodrošinātu lielākus ieņēmumus.

Kopsavilkums

Izmantojot cenu eksperimentus, varat veikt A/B testus un izmantot rezultātus, lai pārliecinoši un precīzi koriģētu savas lietotnes cenas atbilstoši pirktspējai dažādos tirgos visā pasaulē. Varat arī izmantot cenu eksperimentus, lai galvenajos tirgos testētu dažādas izvēlētās cenas salīdzinājumā ar kontroles grupas cenu un gūtu vairāk ieņēmumu. Iestatot optimālo cenu produktiem lietotnēs dažādās valstīs/reģionos, jūs nodrošināsiet, ka lietojat labāko cenu noteikšanas stratēģiju savai lietotnei, lai turpinātu palielināt ieņēmumus un vienlaikus piesaistītu jaunus lietotājus. Tā kā šīs funkcijas pamatā ir lietotnē ietverto produktu cenas un pārdošana, jums ir jābūt tirgotājam un izstrādātājam, lai to izmantotu.

Cenu eksperimenta sagatavošana un izpilde

Tālāk esošajās sadaļās ir sniegtas vadlīnijas un svarīga informācija par cenu eksperimentu sagatavošanu un izpildi, kā arī informācija par to rezultātiem.

Pirms darba sākšanas

Pirms sākat iestatīt cenu eksperimentu rīkā Play Console, izvērsiet un izlasiet visas tālāk norādītās sadaļas.

Priekšnoteikumi

• Eksperimentos var izmantot tikai aktīvus produktus lietotnē.
• Lai izmantotu cenu eksperimentus, lietotājiem ir jābūt atļaujai Pārvaldīt veikala klātbūtni un Skatīt finanšu datus.

Svarīga informācija

Vispārīga informācija

• Eksperimenti darbojas tikai lietotnes līmenī. Jūs nevarat veikt vienu eksperimentu vairākās lietotnēs.
• Maksimālais eksperimenta darbības ilgums ir seši mēneši; pēc tam tiek atjaunota sākotnējā cena. Sākotnējās cenas tiks atjaunotas arī 14 dienas pēc tam, kad būs iegūti statistiski nozīmīgi rezultāti.
• Vienā eksperimentā var testēt ne vairāk kā 1000 produktus lietotnē.
• Vismaz 30 dienas pēc sākotnējā eksperimenta beigām nevar veikt tādu pašu eksperimentu, kurā ir izvēlēti tādi paši produkti lietotnēs un valstis.
• Eksperimentus nevar pārtraukt; tos var tikai sākt vai pilnībā apturēt. Apturētu eksperimentu nevar atsākt.

Valstu/reģionu ierobežojumi

• Vienā valstī/reģionā vienlaikus var veikt tikai vienu eksperimentu. Piemēram, ja jūs jau veicat eksperimentu Norvēģijā, jūs šajā valstī nevarat veikt citu eksperimentu ar citiem produktiem. Jums ir jāaptur pirmais eksperiments un jāizveido cits.
• Testētajai cenai ir jāatbilst cenu diapazonam, kas definēts pirkumiem lietotnēs. Ja cenas procentuālā daļa eksperimenta laikā ir ārpus valstij/reģionam definētā cenu diapazona, cenas procentuālā daļa automātiski tiks noteikta robežvērtības apmērā.
• Katram eksperimentam var būt ne vairāk kā divi cenas varianti un viena kontroles grupa.
• Eksperimenti tiek veikti tikai atlasītajās valstīs/reģionos, bet ne saistītajās ignorētajās atrašanās vietās. Piemēram, ja veicat eksperimentu Francijā, netiek ietvertas saistītās Francijas teritorijas (Francijas Gviāna, Francijas Polinēzija, Gvadelupa, Jaunkaledonija, Majota, Martinika, Reinjona, Senbartelmī, Senmartēna, Senpjēra un Mikelona, kā arī Volisa un Futunas salas).

Izmaiņas produktos lietotnēs

• Ja produkts lietotnē ir iekļauts aktīvā eksperimentā, tā cenu nevar mainīt. Lai mainītu cenu, jums ir jāpārtrauc eksperiments. Ņemiet vērā tālāk sniegto informāciju.
  • Vienīgie izņēmumi ir gadījumi, kad veicat divus eksperimentus un lietojat pirmā eksperimenta rezultātus. Ja jūsu produkts lietotnē ir saistīts ar cenu veidni, varat mainīt produktu lietotnē cenas tikai valstīm, kurās netiek veikts eksperiments.
  • Ja aktīva eksperimenta laikā konfigurēsiet jaunu produktu lietotnē, tas netiks iekļauts eksperimentā.

Eksperimentu veikšana un rezultātu lietošana

• Eksperimentu cenas varat lietot jebkurā laikā, taču ieteicams nogaidīt, līdz rezultāti ir statistiski nozīmīgi, un lietot tikai tās cenu izmaiņas, kurām ir labāki panākumi nekā kontroles grupai.
• Aktīvam eksperimentam nevar pievienot papildu valstis/reģionus vai produktus lietotnē.
• Ja viens vai vairāki jūsu produkti lietotnē ir saistīti ar cenu veidni, lietojot cenas, tiks atjauninātas jūsu eksperimenta valsts/reģiona cenas un šie produkti lietotnē tiks atsaistīti no veidnes.

Eksperimentu terminoloģija

Eksperimentos lielā mērā tiek izmantota statistikas nozares terminoloģija. Ja šie termini jums nav zināmi, ieteicams izskatīt tālāk esošo glosāriju.

Termins	Definīcija	Piezīmes
Ticamības intervāls	Vērtību diapazons, kas norāda iespējamību, vai rezultāts ir statistiski nozīmīgs.	Tas ir galvenais signāls, ar kuru interpretēt eksperimenta rezultātu. Rezultāti tiek uzskatīti par statistiski nozīmīgiem, ja ticamības intervāls neietver 0. Pirmajās dienās tas var netikt parādīts, jo datu apjoms nav liels.
Uzticamības līmenis	Iespējamība, ka novērotā atšķirība starp variantu un kontroles grupu ir patiesa. Piemērs: 90% uzticamības līmenis nozīmē, ka 10% gadījumu novērotā atšķirība, visticamāk, ir nejaušības dēļ. Citiem vārdiem sakot, pastāv mazāk nekā 10% iespējamība, ka testējamie dati tiktu iegūti, ja nav atšķirības starp kontroles grupu un variantu.	Mēs izmantojam datu pārkārtošanu, izmantojot sadalīšanu (statistisks rīks, kas ļauj noteikt dispersiju, veicot pārkārtošanu), lai aprēķinātu ticamības intervālu, un pēc tam lietojam jauktu secīgu varbūtības testēšanu, lai kontrolētu paaugstinātu aplami pozitīvo rezultātu rādītāju no pastāvīgās uzraudzības. Noklusējuma uzticamības līmenis ir 90%, bet jūs varat izvēlēties vērtību no 70% līdz 99%. Eksperimenta iestatīšanas brīdī atlasītā vērtība eksperimenta laikā nemainās. Pēc eksperimenta sākšanas uzticamības līmeni nevar mainīt. Visizplatītākās uzticamības līmeņa vērtības ir 95%, 90% un 99%. Augstākam uzticamības līmenim ir nepieciešams vairāk datu, un tas nozīmē, ka eksperimenta rezultāti ir uzticamāki. 50% nozīmē 50:50 iespējamību, ka rezultāts būs pareizs (līdzīgi kā monētas metiens).
Kontroles grupa	Sākotnējais testējamais mainīgais (pirkuma lietotnē sākotnējā cena) eksperimenta grupā.	Kontroles cenu var redzēt daļa eksperimenta mērķauditorijas, kas tika definēta iestatīšanas brīdī, kā arī visi lietotāji, kuri nav iekļauti eksperimentā.
Eksperimenta rezultāts	Jūsu eksperimenta rezultāts.	Iespējamie eksperimentu rezultāti ir norādīti nākamajā sadaļā.
Aplami pozitīvs	Negatīvs notikums, kas tiek kļūdaini klasificēts kā pozitīvs.	Ja konstatējam, ka tēriņu atšķirība starp kontroles grupu un testu ir statistiski nozīmīga (pozitīva), taču patiesībā tā nav statistiski nozīmīga (negatīva), tas tiek uzskatīts par aplami pozitīvu rezultātu. Aplami pozitīvo notikumu rādītājs ir aplami pozitīvo notikumu skaita un faktisko negatīvo notikumu skaita attiecība.
Produkti lietotnē	Vienumi, par kuriem no lietotājiem tiek iekasēta vienreizēja maksa. Produkti lietotnē var būt tādi vienumi kā virtuālas preces (piemēram, spēļu līmeņi vai burvju dziras) un maksas pakalpojumi jūsu lietotnē, kas ir pieejama pakalpojumā Google Play.	Varat izvēlēties vienu vai vairākus dažādus produktus lietotnē (ne vairāk kā 2000). Kopumā vairāk datu nozīmē mazāk laika, lai konstatētu atšķirību starp kontroles grupu un variantu(-iem), ja atšķirība pastāv. Eksperimentējot ar cenas izmaiņām daudzos produktos, var samazināt izmaiņu savstarpējo ietekmi.
Minimālais konstatējamais efekts (MKE)	Ievades vērtība, kuru izvēlaties, iestatot eksperimentu, un kura norāda uzlabojuma līmeni, ko vēlaties sasniegt ar eksperimentu. Varat to uzskatīt par eksperimenta jutīguma līmeni, kas ietekmē aptuveno laiku līdz statistiskā nozīmīguma sasniegšanai. Kad būsiet izvēlējies MKE, redzēsiet aptuvenu laiku, kas nepieciešams, lai noteiktu statistiski nozīmīgu rezultātu, pamatojoties uz jūsu atlases vēsturiskajiem datiem. Piemēram, mazāks MKE nozīmē jutīgāku eksperimentu, tādēļ aprēķinātais laiks statistiskā nozīmīguma iegūšanai ir ilgāks.	Noklusējuma MKE vērtība ir 30%, taču varat izvēlēties vērtību no 5% līdz 50% ar 5% pieauguma soli. Pēc eksperimenta sākšanas MKE vairs nevar mainīt. MKE ietekmē tikai aptuveno laiku līdz statistiski nozīmīgu aprēķinu iegūšanai, ņemot vērā vēsturiskos datus vai gadījumus, kad nosakām, ka eksperimenta variants(-i) un kontroles grupa ir vienādi. Plašāku informāciju skatiet sadaļā Iespējamie eksperimentu rezultāti. Ja testējat jaunus produktus bez vēsturiskiem datiem, aprēķinātais laiks līdz statistiska nozīmīguma iegūšanai nebūs precīzs.
Jaunumu efekts	Situācija, kad lietotāji dod priekšroku jaunai funkcijai vai vēlas to izmēģināt (piemēram, jaunu produktu vai izvēlēto cenu), pat ja funkcija nav labāka vai saistošāka par oriģinālu. Šajā gadījumā pieaugums parasti pakāpeniski pazeminās.	Eksperimenti, kas tiek ātri pabeigti, var būt pakļauti jaunuma efektam. Lai to ņemtu vērā, ieteicams izmantot aprēķinus par nedēļām, kas nepieciešamas statistiskā nozīmīguma sasniegšanai.
Statistiskais nozīmīgums	A/B testā tas norāda, vai atšķirība starp kontroles grupu un variantu ir reāla vai nejauša.	Ja ticamības intervāls ietekmē neietver vērtību “nulle”, tiek uzskatīts, ka šis rezultāts ir statistiski nozīmīgs. Mūsu gadījumā ietekme ir atšķirība starp kontroles grupas un variantu tēriņiem. Dažus vizuālos piemērus ar ticamības intervāliem varat skatīt sadaļā Bieži uzdotie jautājumi.
Variants	Sākotnējā testējamā mainīgā variants eksperimenta grupai.	Variants ir sākotnējā pirkuma lietotnē cenas palielinājums vai samazinājums.

Eksperimenta iestatīšana

Iestatot eksperimentu, ieteicams eksperimentā iekļaut visus lietotnē ietvertos produktus, piemēram, spēles valūtu, lai ierobežotu savstarpējo ietekmi.

Pirms darba sākšanas: neliels datu apjoms

Ja strādājat ar nelielu datu apjomu, visticamāk, jums nebūs pietiekami daudz datu, lai izdarītu secinājumus no eksperimenta. Piemēram, ja veicat eksperimentu ar jaunu produktu, aprēķinātais eksperimenta ilgums un brīdinājumi var nebūt precīzi. Šādā gadījumā rīkā Play Console, iespējams, redzēsiet brīdinājumu par to, ka jūsu izvēlētajā laika periodā tiek prognozēts ļoti neliels datu apjoms. Ja saņemat ziņojumu par nelielu datu apjomu, iespējams, jums nav pietiekami daudz datu, lai veiktu eksperimentu vai arī varat precizēt eksperimenta parametrus. Šeit ir norādītas ieteicamās darbības nelielā datu apjoma problēmu novēršanai.

Savukārt, ja veicat ilgāku eksperimentu, ir svarīgi ņemt vērā, ka rezultātus var ietekmēt tādi ekonomiski faktori kā globālās valūtas svārstības laika gaitā.

1. daļa: detalizētas informācijas pievienošana

Lai pievienotu eksperimenta informāciju, veiciet tālāk norādītās darbības.

1. Rīkā Play Console pārejiet uz lapu Cenu eksperimenti (Monetizācija > Cenu eksperimenti).
2. Noklikšķiniet uz Izveidot eksperimentu.
3. Sadaļā “Informācijas pievienošana” ievadiet eksperimenta nosaukumu un īsu aprakstu (neobligāti).
   • Piezīme. Lietotāji neredz jūsu eksperimenta nosaukumu un īso aprakstu.
4. Atlasiet valstis/reģionus, kuros vēlaties veikt eksperimentu.
   • Svarīgi! Cenu eksperimenti tiek veikti tikai atlasītajā valstī/reģionā, bet ne saistītajās atrašanās vietās. Tas nozīmē: ja atlasīsiet Franciju, cenu eksperimenti tiks veikti tikai Francijā, bet ne saistītajās teritorijās, piemēram, Francijas Gviānā.
5. Izmantojot nolaižamo izvēlni Produkti, izvēlieties produktus lietotnē, ar kuriem eksperimentēsiet. Nolaižamajā izvēlnē ir norādīti pieejamo produktu lietotnē nosaukumi, ID un cena.
   • Svarīgi! Ja izvēlēsieties produktu lietotnē, kas ir saistīts ar cenu veidni, cenu eksperimenta darbības laikā cenu veidne tiks bloķēta.
6. Atlasiet sākuma datumu. Eksperiments sāksies plkst. 00:00 (pēc Klusā okeāna laika) atlasītajā datumā. Varat ieplānot eksperimenta sākšanu.
7. Noklikšķiniet uz Tālāk, lai turpinātu eksperimenta iestatīšanu, pievienojot variantus.

Ja tiks prognozēts, ka datu apjoms būs pārāk mazs, lai sasniegtu statistiski nozīmīgu rezultātu, tiks parādīts brīdinājums. Šādā gadījumā ieteicams veikt korekcijas, lai nodrošinātu, ka tiek apkopots pietiekami daudz datu un tiek iegūts statistiski nozīmīgs rezultāts. Lai uzzinātu iespējamās nākamās darbības, skatiet sadaļu Ieteicamās darbības, ja datu apjoms ir neliels.

Ieteicamās darbības, ja datu apjoms ir neliels

Tālāk minētie ieteikumi palīdzēs mainīt datu apjomu, kas nepieciešams, lai sasniegtu statistiski nozīmīgu rezultātu un tādējādi saīsinātu eksperimenta ilgumu.

Eksperimenta iestatīšanas darbība	Ieteicamā rīcība
1. daļa: detalizētas informācijas pievienošana	Palieliniet eksperimentā iesaistīto valstu/reģionu skaitu.
1. daļa: detalizētas informācijas pievienošana	Testējiet visus produktus lietotnē vai palieliniet produktu lietotnē skaitu.
2. daļa: variantu pievienošana	Samaziniet variantu skaitu no diviem līdz vienam.
2. daļa: variantu pievienošana	Eksperimentējiet, pazeminot cenu par lielāku procentuālo daļu (pazeminiet cenu). Piezīme. Šis iestatījums neietekmēs sākotnējo aprēķinu, bet tas noderēs eksperimenta laikā.
3. daļa: iestatījumu pārvaldība	Palieliniet mērķauditorijas lielumu katram variantam (piemēram, 50% kontroles grupai un 50% variantiem).
3. daļa: iestatījumu pārvaldība	Palieliniet minimālo konstatējamo efektu. Piezīme. Šis iestatījums ietekmē tikai tos eksperimentus, kuros varianta(-u) un kontroles grupu veiktspēja bija vienāda.
3. daļa: iestatījumu pārvaldība	Pazeminiet uzticamības līmeni.

2. daļa: variantu pievienošana

Sadaļā “Variantu pievienošana” varat pievienot un noņemt cenu variantus. Cenu eksperimentā ir jābūt vismaz vienam variantam. Lai pievienotu variantus, veiciet tālāk norādītās darbības.

1. Nolaižamajā izvēlnē izvēlieties Paaugstināt cenu vai Pazemināt cenu un ievadiet procentuālo vērtību, ko vēlaties lietot savai izvēlei. Ņemiet vērā tālāk sniegto informāciju.
   • Jāievada vesels skaitlis.
   • Ja atlasāt opciju Pazemināt cenu, ievadiet vērtību no 1 līdz 99.
   • Ja atlasāt opciju Paaugstināt cenu, ievadiet vērtību no 1 līdz 999.
2. Pēc varianta pievienošanas lapā tiek parādīts kontroles grupas cenu diapazons un varianta cenu diapazons. Lai iegūtu plašāku informāciju, piemēram, lietotnē ietverto produktu nosaukumus un ID, atrašanās vietas ignorēšanu (ja piemērojams) un nodokļu informāciju, varat noklikšķināt uz Skatīt produktu cenas. Šeit varat skatīt faktisko cenu izmaiņu procentuālo daļu pēc valūtas kursa un valstij atbilstošo cenu modeļu izmantošanas.
3. Ja eksperimentā vēlaties iekļaut vairākus variantus, noklikšķiniet uz + Pievienot citu variantu un atkārtojiet iepriekš minētās darbības. Lapā ir norādīts arī kontroles grupas cenu diapazons un varianta cenu diapazons.
4. Noklikšķiniet uz Tālāk, lai turpinātu eksperimenta iestatīšanu, precizējot eksperimenta iestatījumus.

3. daļa: iestatījumu pārvaldība

Sadaļā “Iestatījumu pārvaldība” varat iestatīt mērķauditorijas atlases parametrus, lai precizētu eksperimentu. Lai pārvaldītu eksperimenta iestatījumus, veiciet tālāk norādītās darbības.

1. Ievadiet eksperimenta mērķauditoriju. Tā ir to lietotāju procentuālā daļa, kuri piedalīsies eksperimentā. Šo lietotāju skaits variantam(-iem) un kontroles grupai tiks sadalīts vienādi. Ņemiet vērā, ka eksperimentā neiekļautie lietotāji redzēs arī sākotnējo (kontroles grupas) cenu, bet netiks iekļauti eksperimenta analīzē.
   • Piezīme. Jums ir jāievada vesels skaitlis no 1 līdz 100.
2. Ievadiet uzticamības līmeni. Samazinot uzticamības līmeni, palielināsies iespējamība saņemt aplami pozitīvu rezultātu, taču tiks samazināts eksperimenta ilgums.
3. Ievadiet minimālo konstatējamo efektu. Tas norāda uzlabojuma līmeni, kuru vēlaties noteikt ar eksperimentu. Varat to uzskatīt par eksperimenta jutīguma līmeni. Tādējādi tiks pielāgots aptuvenais laiks līdz statistiskā nozīmīguma sasniegšanai.
4. Norādiet mērķauditorijas atlases parametrus, lai precizētu savu eksperimentu. Varat izmantot aprēķināto laiku līdz statistiskā nozīmīguma sasniegšanai kā vadlīniju, pamatojoties uz saviem iestatījumiem.

4. daļa: eksperimenta sākšana

Tagad esat gatavs sākt eksperimentu. Eksperimenta laikā atlasītajiem produktiem lietotnē norādītajās valstīs un reģionos mainīsies cenas. Eksperimentu varat pabeigt jebkurā brīdī.

1. Pirms eksperimenta palaišanas apstipriniet, ka saprotat tālāk norādīto.
   • Eksperiments var ietekmēt lietotnes ieņēmumus. Ņemiet vērā: ja nav sasniegts statistiski nozīmīgs rezultāts, jebkāds negatīvu vai pozitīvu ieņēmumu rezultāts var nebūt jēgpilns, tāpēc iesakām pagaidīt, līdz sasniedzat statistiski nozīmīgu rezultātu.
   • Kamēr eksperiments būs aktīvs, nevarēsiet rediģēt cenas atlasītajiem produktiem lietotnē.
   • Eksperimenta rezultātu lietošana ietekmēs visas iekļautās valstis/reģionus un produktus lietotnē.
2. Noklikšķiniet uz Apstiprināt un palaist.

Neobligāti: eksperimenta beigšana

Eksperimentu varat pabeigt jebkurā brīdī.

1. Rīkā Play Console pārejiet uz lapu Cenu eksperimenti (Monetizācija > Cenu eksperimenti).
2. Atveriet eksperimentu, kuru vēlaties beigt.
3. Noklikšķiniet uz Beigt eksperimentu.

Pēc eksperimenta pabeigšanas eksperimenta cenas tiks mainītas uz sākotnējo cenu attiecīgajās valstīs/reģionos un produktos lietotnē. Eksperiments un analīze vairs nebūs aktīvi.

Ja esat ieplānojis eksperimentu nākotnē, varat to arī atcelt, veicot iepriekš minētās darbības. Ja eksperiments tiek atcelts, kad līdz plānotajam sākuma datumam ir mazāk nekā 24 stundas, dažkārt tas var tikt īslaicīgi aktivizēts.

Eksperimenta rezultātu skatīšana un variantu lietošana

Ir svarīgi iepazīties ar dažādiem iespējamiem eksperimentu rezultātiem un to ietekmi uz jūsu lietotni un tās cenu noteikšanas stratēģiju. Pirms rezultātu lietošanas rūpīgi izlasiet šo sadaļu.

Eksperimenta rezultātu skatīšana un analizēšana

Kad rezultāti tiks uzskatīti par statistiski nozīmīgiem, tie būs pieejami jūsu eksperimenta analīzes lapā un uz jūsu iesūtni tiks nosūtīts ziņojums.

Rezultātu skatīšana

Lai skatītu rezultātu un analīzi, apmeklējiet eksperimentu. Atveriet lapu Cenu eksperimenti (Monetizācija > Cenu eksperimenti) un noklikšķiniet uz labās bultiņas blakus eksperimentam, lai skatītu eksperimenta analīzes lapu.

Rezultāts tiek parādīts lapas augšdaļā. Izvērsiet sadaļu Iespējamie eksperimentu rezultāti, lai skatītu dažādu veidu rezultātus un to nozīmi. Zem eksperimenta rezultāta varat skatīt īsu aprakstu, kas raksturo rezultātu. Piemēram, varat redzēt rezultātu “Variantam [X] bija vislabākā veiktspēja” un īsu eksperimenta rezultāta paskaidrojumu, piemēram, “Variantam [X] bija vislielākie ieņēmumi”. Ja varianta rezultāti bija vienādi ar vai labāki par kontroles grupas rezultātiem, varat noklikšķināt uz Lietot variantu [X], lai lietotu variantu un attiecīgi mainītu produkta lietotnē cenu. Lai uzzinātu vairāk, skatiet sadaļu Variantu lietošana.

Piezīme. Eksperimenti automātiski beidzas 14 dienas pēc rezultāta noteikšanas. Varat arī noklikšķināt uz Beigt eksperimentu, lai to nekavējoties pabeigtu.

Padoms. Varat lietot eksperimenta cenas jebkurā brīdī, taču ieteicams nogaidīt, līdz rezultāti ir statistiski nozīmīgi, un lietot tikai tās cenu izmaiņas, kuras darbojas labāk nekā kontroles grupa.

Papildu datu skatīšana

Zem rezultāta tabulā ir parādīti statistikas rezultātu pamatā esošie dati. Tabulā ir norādīts(-i) variants(-i), ieņēmumi, ieņēmumi salīdzinājumā ar kontroles grupu (un to procentuālā daļa) un varianta(-u) ticamības intervāls. Ja vēlaties izprast, ko nozīmē eksperimenta rezultātu lapā redzamie rādītāji, izvērsiet tālāk sadaļu Rādītāju definīcijas.

Sadaļā “Papildu dati” zem tabulas varat skatīt detalizētākus datus. Diagrammā pēc noklusējuma ir redzami ieņēmumi salīdzinājumā ar kontroles grupu līdz jaunākajam pieejamajam datumam. Šajā skatā ēnotais apgabals attēlo ticamības intervālu. Diagrammā var redzēt ticamības intervāla izmaiņas laika gaitā. Varat pielāgot atlasīto ilgumu un datumus, izmantojot ilguma un datumu filtrus diagrammas augšējā labajā stūrī.

Izmantojot rādītāju filtru diagrammas augšējā kreisajā stūrī, varat arī skatīt šādus rādītājus: Ieņēmumi, Pasūtījumi, Pircēji, Pircēju procentuālā daļa, VIVML (šie rādītāji ir aprakstīti arī sadaļā Rādītāju definīcijas). Ja izvēlēsieties citu rādītāju, diagrammā netiks rādīts ticamības intervāls, jo tā pamatā ir ieņēmumi.

Lai skatītu produkta līmeņa informāciju, varat arī eksportēt eksperimenta rezultātus kā CSV failu. Izvērsiet sadaļu Rādītāju definīcijas (CSV faila eksportēšana), lai skatītu CSV faila laukus, formātu un eksportēšanas piemērus.

Padoms. Varat noklikšķināt uz Skatīt eksperimenta iestatījumus, lai skatītu detalizētu informāciju par eksperimenta iestatīšanu un filtrētu pēc varianta un valsts/reģiona. Tas var noderēt, lai ātri atgādinātu par eksperimenta parametriem.

Variantu lietošana

Pirms varianta lietošanas ņemiet vērā tālāk norādīto informāciju.

• Ja viens vai vairāki jūsu produkti lietotnē ir saistīti ar cenu veidni, lietojot variantu, tiks atjauninātas jūsu eksperimenta valsts/reģiona cenas un šie produkti lietotnē tiks atsaistīti no veidnes.
• Varat lietot variantu tikai visiem eksperimentā iekļautajiem produktiem lietotnē un valstīm/reģioniem kopā. Mēs aprēķinām statistisko nozīmīgumu visiem iesaistītajiem elementiem, tādēļ nevaram garantēt tādu pašu rezultātu un ietekmi, ja izmaiņas tiek lietotas tikai daļai elementu.

Ja jūsu varianta(-u) veiktspēja bija vienāda ar vai labāka par kontroles grupas veiktspēju, varat veikt tālāk minētās darbības, lai lietotu variantu un atjauninātu cenas.

1. Rīkā Play Console pārejiet uz lapu Cenu eksperimenti (Monetizācija > Cenu eksperimenti).
2. Noklikšķiniet uz Lietot variantu blakus tam variantam, kuru vēlaties lietot.

Jūsu lietotnes cenas tiks atjauninātas atbilstoši varianta konfigurācijai. Jūsu eksperiments tiks automātiski pabeigts 14 dienas pēc rezultāta noteikšanas. Varat arī noklikšķināt uz Beigt eksperimentu, lai to nekavējoties pabeigtu.

Iespējamie eksperimentu rezultāti

Eksperimentam var būt vairāki rezultāti. Eksperimenta rezultāts nosaka turpmāko rīcību.

Eksperimenta rezultāts	Nozīme	Piezīmes/ieteikumi
Variantam [X] bija vislabākā veiktspēja	Variants [X] ir kļuvis statistiski nozīmīgs, sniedzot jēgpilnu rezultātu ar vislielāko ieņēmumu pieaugumu.	Lietojiet variantu [X], jo tas ievērojami pārspēj kontroles grupu un citus variantus.
Abu variantu veiktspēja bija labāka nekā kontroles grupai	Abi varianti sasniedza lielākus ieņēmumus nekā kontroles grupa. Pārskatiet rezultātus un izlemiet, kuru variantu lietot.	Jūs izlemjat, kuru variantu lietot.
Varianta(-u) un kontroles grupas veiktspēja bija līdzvērtīga.	Neviena varianta ieņēmumi nepārsniedza kontroles grupas ieņēmumus.	Jūsu eksperimentā ir apkopots pietiekami daudz datu, un varianta(-u) un kontroles grupa veiktspēja ir vienāda.
Kontroles grupas veiktspēja bija vislabākā	Kontroles grupa guva lielākus ieņēmumus nekā abi varianti.	Tas nozīmē, ka eksperimentā iesaistītajās valstīs un produktos jau ir iestatītas optimālas izvēlētās cenas. Turpiniet izmantot kontroles grupas cenu eksperimentā iesaistītajiem produktiem un valstīm.
Nepieciešams vairāk datu	Eksperiments pašlaik notiek. Lai noteiktu statistiski nozīmīgu rezultātu, nepieciešams vairāk datu.	Lai izlemtu nākamās darbības, skatiet sadaļu Ieteicamās darbības, ja datu apjoms ir neliels.
Nepārliecinošs rezultāts	Jūsu eksperiments ir priekšlaicīgi apturēts, vai ir sasniegts maksimālais eksperimenta ilgums — seši mēneši. Lai noteiktu statistiski nozīmīgu rezultātu, nepieciešams vairāk datu. Mēģiniet izpildīt jaunu eksperimentu ar citādiem iestatījumiem.	Lai izlemtu nākamās darbības, skatiet sadaļu Ieteicamās darbības, ja datu apjoms ir neliels. Šis rezultāts var liecināt par to, ka eksperimentā iesaistītajās valstīs/reģionos pircējiem ir vienaldzīgas produktu lietotnē cenas.

Rādītāju definīcijas

Šajā tabulā ir minēti rādītāji no eksperimenta analīzes lapas.

Rādītājs	Definīcija
Visu produktu ieņēmumi	Bruto ieņēmumi no eksperimentā iesaistītiem lietotājiem, kuri norādītajā laika periodā iegādājās produktus lietotnē eksperimentā un ārpus tā.
Vidējie ieņēmumi uz vienu maksājošu lietotāju (VIVML)	Produktu lietotnē kopējie bruto ieņēmumi, kas dalīti ar unikālo pircēju skaitu (lietotāji, kuri iegādājas vismaz vienu produktu lietotnē eksperimentā un ārpus tā) eksperimentam norādītajā laika periodā. Šis rādītājs palīdzēs izprast pircēju vērtību jūsu uzņēmējdarbībai.
Pircēju procentuālā daļa (28 dienu periods)	To mēneša aktīvo lietotāju procentuālā daļa, kuri eksperimenta laikā iegādājās vismaz vienu produktu lietotnē, tostarp produktus lietotnē, kas nav iekļauti eksperimentā. Piezīme. Šis ir galvenais rādītājs, kas palīdz izprast pircēju iegūšanu un palielināt maksājošo lietotāju grupu.
Pircēji	Unikālie lietotāji, kas norādītajā laika periodā iegādājas vismaz vienu produktu lietotnē par eksperimenta cenu.
Ieņēmumi no jaunajiem instalētājiem	Bruto ieņēmumi no lietotājiem, kuri jebkurā ierīcē pēc eksperimenta sākuma datuma instalēja lietotni pirmo reizi un kuriem eksperimenta cena tika rādīta pirmo reizi. Ņemiet vērā, ka daži lietotāji atsakās no šo datu kopīgošanas ar uzņēmumu Google.
Pasūtījumi	Eksperimentā iekļauto produktu lietotnē pirkumi, kas veikti eksperimentā norādītajā laika periodā.
Ieņēmumi	Bruto ieņēmumi no eksperimentā iesaistītajiem lietotājiem, kuri norādītajā laika periodā iegādājās eksperimentā iekļautos produktus lietotnē.

Rādītāju definīcijas (CSV faila eksportēšana)

Šajā tabulā ir norādīti eksportētā CSV faila lauki, formāts un eksportēšanas piemēri.

Lauks	Formāts	Piemēri un piezīmes
Datums	Virkne	Mar 23, 2023 Pasūtījuma datums pēc Klusā okeāna laika joslas (formātā MMM DD, GGGG).
Produkta identifikācijas numurs	Virkne	dargumu_lade_jauniem_lietotajiem Izstrādātāja norādīts unikālais produkta lietotnē ID.
Produkta nosaukums	Virkne	monētas, mēneša abonements u.c. Izstrādātāja norādīts produkta lietotnē nosaukums.
Valsts	Virkne	BR, US, FR u.c. Unikāls valsts kods atbilstošiem lietotnē ietverto produktu rādītājiem.
Eksperimenta grupa	Virkne	KONTROLES GRUPA, A, B Eksperimenta grupa atbilstošiem lietotnē ietverto produktu rādītājiem.
Izstrādātāja valūta	Virkne	USD, EUR, THB u.c. Valūta, kurā tika konvertēti pasūtījumi. Šī ir vietējā valūta, kurā saņemat maksājumu.
Ieņēmumi	Skaitlis	2794,60 Kopējie bruto ieņēmumi norādītajam produktam lietotnē, ņemot vērā datumu, valsti un eksperimenta grupu.
Ieņēmumi no jaunajiem instalētājiem	Skaitlis	577,20 Bruto ieņēmumi no lietotājiem, kuri jebkurā ierīcē pēc eksperimenta sākuma datuma instalēja lietotni pirmo reizi un kuriem cena tika rādīta pirmo reizi (ņemot vērā norādīto produktu lietotnē, datumu, valsti un eksperimenta grupu). Ņemiet vērā, ka daži lietotāji atsakās no šo datu kopīgošanas ar uzņēmumu Google.
Pasūtījumi	Skaitlis	240 Kopējais pasūtījumu skaits norādītajam produktam lietotnē, ņemot vērā datumu, valsti un eksperimenta grupu.
Pircēji	Skaitlis	197 Kopējais pircēju skaits norādītajam produktam, ņemot vērā datumu, valsti un eksperimenta grupu. Pircēji ir lietotāji, kuri eksperimenta laikā iegādājās konkrēto produktu lietotnē.

Bieži uzdotie jautājumi

Sakļaut visu Izvērst visu

Kurās valstīs/reģionos varu veikt eksperimentus?

Cenu eksperimentus varat veikt tikai tajās valstīs/reģionos, kuri atbilst tālāk minētajiem kritērijiem.

• Valstis/reģioni, kuros jau esat izlaidis laidienu (tostarp iekšējās testēšanas kanālos).
• Valstis/reģioni, kuros tiek atbalstīta vietējā valūta.

Kāpēc eksperimenta analīzes lapā nav redzami nekādi dati?

Ja datu apjoms ir ļoti mazs, dati nav pieejami. Turklāt noteiktiem datiem, kas tiek rādīti eksperimenta analīzes lapā, var būt pat septiņas dienas ilga aizkave.

Vai varu izmantot produktus lietotnē, kas ir saistīti ar cenu veidnēm?

Jā. Ņemiet vērā: ja veicat eksperimentu ar produktu lietotnē, kas saistīts ar cenu veidni, eksperimenta laikā valstij/reģionam noteiktās eksperimenta cenas nevar mainīt. Jūs joprojām varat mainīt cenas citās valstīs/reģionos.

Ja eksperimenta beigās izlemsiet lietot jaunās cenas, visi eksperimentā iekļautie produkti lietotnē tiks atsaistīti no saistītajām cenu veidnēm un cenu veidne paliks nemainīga. Ja vēlaties lietot eksperimenta rezultātus, neatsaistot produktus lietotnē no cenu veidnēm, pārejiet tieši uz lapu Cenu noteikšanas veidnes (Iestatīšana > Cenu noteikšanas veidnes) un atjauniniet cenas šajā lapā.

Lai uzzinātu vairāk, skatiet rakstu par cenu veidnēm.

Vai varu testēt cenas, kas ir daudz zemākas vai augstākas par pašreizējo iestatīto ierobežojumu katrai valstij?

Nē, var testēt tikai tādas eksperimenta cenas, kas atbilst katrai valstij/reģionam noteiktajam minimālās un maksimālās cenas diapazonam. Ja, iestatot eksperimentu, tiks konstatēts, ka ar cenas izmaiņām tiek pārsniegts ierobežojums, automātiski tiks iestatīta minimālā vai maksimālā cena. Lai uzzinātu cenu diapazonu sarakstu un valstīs atkļautās valūtas, skatiet rakstu Atbalstītās atrašanās vietas lietotņu izplatīšanai Google Play lietotājiem.

Vai man ir jāizmanto Google Play norēķinu bibliotēkas 5. versija, lai veiktu cenu eksperimentus?

Nē, varat veikt cenu eksperimentus, ja jums ir jebkāda Google Play norēķinu sistēmas versija.

Kā varu uzzināt, vai lietotājs veica pirkumu par varianta cenu, nevis kontroles grupas cenu?

Visi eksperimenta pasūtījumi ir redzami lejupielādējamos ikmēneša finanšu pārskatos (aprēķinātā pārdošanas apjoma pārskats un ieņēmumu pārskats). Varat skatīt, kuri eksperimentā iekļautie produkti lietotnē tiek iegādāti par kontroles grupas cenām un variantu cenām valstīs un reģionos, kur veicat cenu eksperimentu.

Vai vienlaicīgi varu izmantot citus A/B testēšanas un cenu eksperimentus?

Lai iegūtu jēgpilnus rezultātus, nav ieteicams vienlaikus veikt vairākus A/B eksperimentus. Piemēram, Firebase darbojas neatkarīgi no cenu eksperimentiem rīkā Play Console, un mijiedarbība ar noteiktiem produktiem lietotnē var ietekmēt eksperimenta rezultātu uzticamību.

Kādu metodi izmantojat, lai noteiktu statistisko nozīmīgumu?

Mēs izmantojam datu pārkārtošanu, izmantojot sadalīšanu (statistisks rīks, kas ļauj noteikt dispersiju, veicot pārkārtošanu), lai aprēķinātu ticamības intervālu, un pēc tam lietojam jauktu secīgu varbūtības testēšanu, lai kontrolētu paaugstinātu aplami pozitīvo rezultātu rādītāju no pastāvīgās uzraudzības. Rezultāti tiek uzskatīti par statistiski nozīmīgiem, ja ticamības intervāls neietver nulli.

Kādas atļaujas ir nepieciešamas, lai izmantotu cenu eksperimentu rīku?

Lai izmantotu cenu eksperimentus, jums ir jābūt atļaujai Pārvaldīt veikala klātbūtni un Skatīt finanšu datus.

Kāpēc mans eksperiments ir apturēts?

Eksperiments automātiski tiek apturēts 14 dienas pēc statistiskā nozīmīguma sasniegšanas vai maksimālā eksperimenta ilguma (seši mēneši) paiešanas. Mēs neapturam eksperimentu, kad pagājis iestatīšanas brīdī aprēķinātais eksperimenta ilgums. Eksperiments tiek apturēts, kad tiek konstatētas statistiski nozīmīgas atšķirības, un jums ir 14 dienas laika lietot jaunās cenas, pirms tiek atjaunotas sākotnējās cenas.

Vai ir iespējams, ka lietotājs (kas izmanto to pašu kontu un ierīci) pēc eksperimenta sākšanas var redzēt dažādas dienas cenas?

Nē, tas nav iespējams. Eksperimenta laikā lietotājam tiks rādīta tikai viena cena.

Vai aktīvam eksperimentam varu pievienot vairāk valstu/reģionu?

Nē, tas nav iespējams, jo eksperimentā jau ir sākta rezultātu apkopošana, izmantojot sākotnēji atlasītos parametrus. Varat paralēli veikt otru eksperimentu, atlasot citas valstis/reģionus, vai arī beigt pašreizējo eksperimentu un iestatīt jaunu. Ņemiet vērā: ja produkti lietotnē un valstis/reģioni pārklājas, būs jāgaida 30 dienas, līdz varēsiet iestatīt jaunu eksperimentu.

Kāpēc nevaru iegūt to pašu rezultātu, kas tika iegūts cenu eksperimentā?

Statistiskais nozīmīgums tiek aprēķināts visās valstīs/reģionos kopā ar eksperimentā iekļautajiem produktiem, nevis atsevišķi katrai kombinācijai. Ja jūs interesē cenu korekcija konkrētā valstī/reģionā, ieteicams eksperimenta iestatījumos atlasīt tikai šo valsti/reģionu.

Vai variantu varēs lietot arī pēc eksperimenta apturēšanas vai pabeigšanas?

Jā, varat lietot variantu arī pēc tam, kad būs atjaunotas sākotnējās cenas.

Kādēļ dažos eksperimentos netiek iegūts pārliecinošs rezultāts?

Ja eksperimentā iekļautie produkti lietotnē negūst ieņēmumus, kas būtiski atšķiras no kontroles grupas ieņēmumiem, vai nav pietiekami daudz datu, tiek uzskatīts, ka rezultāts nav pārliecinošs. Iespējams, pircējiem abas cenas ir vienaldzīgas.

Vai parasti tiek uzskatīts par labu praksi eksperimentā iekļaut vienu produktu lietotnē vai vairākus produktus lietotnē?

Parasti lielāka izlase nodrošina vairāk iespēju. Ja plānojat testēt vienu produktu lietotnē, kas ir ļoti populārs un kam ir daudz pircēju, iespējams, ir vērts testēt šo produktu lietotnē atsevišķi. Pretējā gadījumā ieteicams vienlaikus testēt vairākus produktus lietotnē, lai palielinātu eksperimenta efektivitāti.

Ja jums ir vairāki produkti lietotnē, kas ir ļoti līdzīgi (piemēram, 0,99 USD par 60 valūtas vienībām lietotnē un 4,99 USD par 300 valūtas vienībām lietotnē), ieteicams testēt abus produktus lietotnē kopā, lai izvairītos no savstarpējās ietekmes.

Vai man ir jāveic eksperimenti ar vienu vai diviem variantiem?

Parasti tiek ieteikti viena varianta eksperimenti, kontroles grupā iekļaujot produktu(-us) lietotnē ar sākotnējo cenu, bet variantam izvēloties produktu(-us) lietotnē ar atlaidi. Divu variantu eksperimentā ir iekļauti produkti lietotnē ar sākotnējo cenu kā kontroles grupa un tie paši produkti lietotnē ar divām dažādām izvēlētajām cenām. Šādu eksperimentu rezultātus var būt grūti interpretēt, un divu variantu eksperimentiem ir nepieciešams ilgāks laiks statistiski nozīmīga rezultāta sasniegšanai nekā viena varianta eksperimentiem.

Kā interpretēt eksperimenta ticamības intervālu?

Ja ticamības intervāls ietekmē neietver vērtību “nulle”, tiek uzskatīts, ka šis rezultāts ir statistiski nozīmīgs. Mūsu gadījumā ietekme ir atšķirība starp kontroles grupas un variantu tēriņiem.

Tālāk ir sniegts ticamības intervāla piemērs, kāds varētu būt ticamības intervāls ar pārliecinošu pozitīvu rezultātu.

Tālāk ir sniegts piemērs, kāds varētu būt ticamības intervāls ar pārliecinošu negatīvu rezultātu.

Tālāk ir sniegts piemērs, kāds varētu būt ticamības intervāls ar nepārliecinošu rezultātu, kam nepieciešams vairāk datu.

Vai Google nodrošina izstrādātājiem jebkādu aizsardzību pret cenu starpniecību?

Jā, mēs pastāvīgi pārraugām lietotāju atrašanās vietu viltošanas gadījumus un rīkojamies, lai mazinātu ietekmi uz izstrādātājiem un viņu produktiem.

Saistīts saturs

• Uzziniet vairāk par cenu eksperimentiem un saistītām funkcijām.
• Apgūstiet cenu eksperimentu kursu Google Play akadēmijā.