Izvajanje preizkusov A/B za objavo v trgovini

Ker želimo razvijalcem zagotoviti več nadzora in večjo statistično robustnost, smo pred kratkim uvedli nekaj sprememb v zvezi s preizkusi za objavo v trgovini v Konzoli Play. Dodali smo tri nove zmožnosti:

  • konfiguracija parametrov preizkusa;
  • računalo za ocenitev potrebnih vzorcev in časa do dokončanja; in
  • intervali zaupanja, ki zdaj omogočajo neprekinjen nadzor. 

To stran smo posodobili skladno s temi spremembami. 

Funkcije, ki so opisane na tej strani, še niso na voljo vsem razvijalcem.

Če želite optimizirati objavo v trgovini v Googlu Play, lahko izvajate preizkuse in tako poiščete najučinkovitejše grafične elemente in lokalizirano besedilo za aplikacijo. Preizkuse lahko izvajate za strani glavne objave v trgovini in objave v trgovini po meri.

Za objavljene aplikacije lahko na podlagi podatkov o namestitvi preverite uspešnost trenutne različice v primerjavi z drugimi različicami. Preden nastavite preizkus, preglejte najboljše postopke za izvajanje učinkovitih preizkusov.

Opomba: globalni preizkusi so preimenovani v privzete preizkuse grafičnih elementov. Imajo enake funkcije kot pred preimenovanjem.

Vrste preizkusov

Za vsako aplikacijo lahko naenkrat izvedete en privzeti preizkus grafičnih elementov ali do pet lokaliziranih preizkusov.

Privzeti grafični elementi

V privzetem preizkusu grafičnih elementov lahko preizkušate grafične elemente v privzetem jeziku objave aplikacije v trgovini. Vključite lahko različice ikone aplikacije, predstavitvene slike, posnetkov zaslona in promocijskega videoposnetka.

  • Če je objava aplikacije v trgovini na voljo samo v enem jeziku: privzeti preizkusi grafičnih elementov bodo prikazani vsem uporabnikom.
  • Če ste dodali lokalizirane grafične elemente v določenem jeziku: uporabniki, ki si aplikacijo ogledujejo v tem jeziku, so izvzeti iz privzetih preizkusov grafičnih elementov aplikacije. Če je na primer privzeti jezik aplikacije angleščina in ima aplikacija lokalizirano predstavitveno sliko v francoščini, bodo uporabniki, ki si aplikacijo ogledujejo v francoščini, izključeni iz preizkusa (tudi če preizkušate samo ikono).
Lokalizirano (besedilo in grafični elementi)

V lokalnem preizkusu lahko preizkušate ikono aplikacije, predstavitveno sliko, posnetke zaslona, predstavitveni videoposnetek in/ali opise aplikacije v do petih jezikih. Različice preizkusa bodo prikazane samo uporabnikom, ki si objavo aplikacije ogledujejo v jezikih, ki jih izberete.

Če je objava aplikacije v trgovini na voljo samo v enem jeziku, bodo lokalizirani preizkusi pokazani samo uporabnikom, ki si ogledujejo aplikacijo v njenem privzetem jeziku.

1. korak: Ustvarjanje preizkusa

Če želite ustvariti preizkus v Konzoli Play:

  1. Odprite Konzolo Play in stran Preizkusi za objavo v trgovini (Rast > Prisotnost v trgovini > Preizkusi za objavo v trgovini).
  2. Kliknite Ustvari preizkus.
  3. Vnesite podrobnosti preizkusa:
    • Ime preizkusa: Vnesite ime svojega preizkusa (največ 50 znakov).
    • Objava v trgovini: Izberite objavo v trgovini, s katero želite izvesti ta preizkus.
    • Vrsta preizkusa: Izberite Preizkus s privzetimi grafičnimi sredstvi ali Lokaliziran preizkus.
  4. Kliknite Naprej.
  5. Nadaljujte na navodila pri »2. korak: Nastavitev preizkusa«.

2. korak: Nastavitev preizkusa

Ko ustvarite preizkus, lahko izberete objavo v trgovini, različice in atribute, ki jih želite preizkusiti.

Če želite nastaviti preizkus:

  1. Upoštevajte navodila na zaslonu, da izberete objavo v trgovini in dodate cilje preizkusa, denimo ciljno meritev, ciljno skupino preizkusa, različice in druge nastavitve.
  2. Če želite začeti preizkus, na vrhu strani kliknite Izvedi preizkus.
  3. Če želite pozneje dokončati nastavitev preizkusa, kliknite Shrani.
Ogled opisov polj, primerov in nasvetov

Med nastavitvijo preizkusa morate navesti spodnje informacije objave v trgovini.

Polje Opis Primeri in nasveti
Ime preizkusa

Ime preizkusa je vidno samo v Konzoli Play, da veste, za kateri preizkus gre, in ni vidno uporabnikom.

  • »Preizkus svetle ikone«
  • »Predstavitvena slika z logotipom«
  • »Kratek opis z novim sloganom«
Objava v trgovini Objava v trgovini (glavna ali po meri), ki jo želite preizkusiti.

Ko začnete preizkus, je ime objave v trgovini po meri prikazano z imenom, ki ga je imela ob začetku preizkusa. Če po začetku preizkusa posodobite ime objave v trgovini po meri, se v okviru preizkusa ne bo spremenilo.

Če se želite izogniti zmedi pri izvajanju preizkusov, priporočamo, da izbrišete neuporabljene objave v trgovini po meri in po potrebi ustvarite nove.


Med nastavitvijo preizkusa morate navesti spodnje informacije o ciljih preizkusa. Te nastavitve bodo vplivale na natančnost preizkusa in število namestitvenih programov, potrebnih za doseganje rezultata.

Polje Opis Primeri in nasveti
Ciljna meritev Meritev, ki bo uporabljena za ugotavljanje rezultata preizkusa.

Na voljo sta dve možnosti: 

  • Uporabniki, ki so prvič namestili aplikacijo in jo obdržali (priporočeno): Število uporabnikov, ki so prvič namestili aplikacijo in jo ohranili nameščeno vsaj 1 dan.
  • Uporabniki, ki so prvič namestili aplikacijo: Število uporabnikov, ki so prvič namestili aplikacijo, ne glede na to, ali so jo obdržali.
Različice Število preizkusnih različic za preizkušanje v primerjavi s trenutno objavo v trgovini. Preizkušanje ene različice pomeni, da je preizkus opravljen prej.

Če želite preizkusu dodati novo različico, v spustnem meniju »Različice« izberite drugo možnost.

Dodate lahko največ tri različice na preizkus (poleg trenutne različice).

Ciljna skupina preizkusa

Odstotek obiskovalcev objave v trgovini, katerim bo prikazana preizkusna različica namesto trenutne objave. 

Ti obiskovalci bodo enakomerno razdeljeni med vaše preizkusne različice.

Če za ciljno skupino vnesete »30 %«, bo preostalih 70 odstotkov obiskovalcev objave v trgovini videlo trenutno različico strani.

Če imate 30-odstotno ciljno skupino in dve različici preizkusa, bo vsaka od njih prikazana 15 odstotkom uporabnikov.

Med preizkusom bo posameznemu uporabniku prikazana samo ena različica ali trenutna različica vaše strani.

Minimalno zaznavni učinek Najmanjša razlika med različicami in nadzorom, zahtevanim za ugotavljanje, katera je uspešnejša. Če je razlika manjša od te nastavitve, bo za preizkus upoštevan neodločen izid.  
Stopnja zaupanja Kako pogosto interval zaupanja, ki ga navede preizkus, vsebuje dejansko uspešnost različice v objavi v trgovini.

S povečanjem stopnje zaupanja se zmanjša verjetnost lažno pozitivnega rezultata.

Opomba: Če za svoj preizkus izberete 90-odstotno stopnjo zaupanja, to pomeni, da lahko en preizkus od desetih poroča o lažno pozitivnem rezultatu.

Atributi

Izbira vrste elementa, ki ga želite preizkusiti v primerjavi s trenutno objavo.

Za najučinkovitejšo izvedbo preizkusov hkrati preizkušajte samo en atribut.

Kratek in celoten opis lahko preizkusite samo v lokaliziranih preizkusih.

Če preizkušate grafične elemente, ne pozabite upoštevati zahtev glede velikosti in vrste datotek.


Če med vnašanjem informacij o ciljih preizkusa kliknete Urejanje ocenjenih vrednosti, lahko uredite spodaj navedene ocenjene dnevne vrednosti. Te vrednosti vam pomagajo izračunati, kako dolgo bo trajal preizkus. Morda se razlikujejo od ugotovljene uspešnosti.

Polje Opis Primeri in nasveti
Dnevni obiski novih uporabnikov Ocenjeno število obiskovalcev objave v trgovini, ki prej še niso namestili vaše aplikacije.  
Stopnja konverzije Ocenjeni odstotek obiskovalcev, ki se bodo spremenili v vašo ciljno meritev.

Če so vaša ciljna meritev na primer uporabniki, ki so prvič namestili aplikacijo, je stopnja konverzije ocenjen odstotek obiskovalcev, ki bodo postali uporabniki, ki so prvič namestili aplikacijo.

Dnevni uporabniki, ki so prvič namestili aplikacijo in jo obdržali

Ocenjeno število uporabnikov, ki bodo prvič namestili aplikacijo in imeli nameščeno po enem dnevu.

Več o tem lahko preberete v razdelku Ogled opisov statističnih podatkov, meritev in primerov.
Dnevni uporabniki, ki so prvič namestili aplikacijo

Ocenjeno število uporabnikov, ki bodo obiskali objavo v trgovini in aplikacijo prvič namestili.

Več o tem lahko preberete v razdelku Ogled opisov statističnih podatkov, meritev in primerov.

3. korak: Pregled in uporaba rezultatov

Če želite pregledati in uporabiti rezultate:

  1. Odprite Konzolo Play in stran Preizkusi za objavo v trgovini (Rast > Prisotnost v trgovini > Preizkusi za objavo v trgovini).
  2. V tabeli pri vrstici s preizkusom, ki ga želite pregledati, izberite puščico desno. Če želite izvedeti več o tem, kako so prikazane podrobnosti, si oglejte tabele s preizkusi za objavo v trgovini.
  3. V razdelku »Rezultati« si oglejte povzetek rezultatov vašega preizkusa. Rezultati temeljijo na vaši ciljni meritvi.

    Na podlagi rezultatov lahko ugotovite, katere možnosti so najuspešnejše oziroma uspešnejše od trenutne objave v trgovini. Prikazano je tudi pojasnilo posameznega rezultata na podlagi njegovega intervala zaupanja in minimalnega zaznavnega učinka ter priporočeno dejanje (če je primerno). Če je bilo zbranih premalo podatkov za pridobitev rezultata, bo morda prikazan rezultat »Potrebnih je več podatkov«.
     
  4. Naslednje dejanje je odvisno od rezultatov preizkusa: 
    • Če je bila različica uspešna, bo morda prikazano priporočilo, da uporabite to različico.
    • Če je prikazan rezultat »Pustite preizkus teči, če želite zbrati več podatkov«, se vrnite pozneje.
    • Če je bilo več različic uspešnejših od vaše objave v trgovini ali če je bil prikazan rezultat »Neodločeno«, preglejte rezultate in se odločite, katero različico želite uporabiti. 
    • Če je trenutna objava v trgovini najuspešnejša, kliknite Ohrani trenutno objavo.
Tabele s preizkusi za objavo v trgovini

Ko nastavite preizkuse, bodo na strani Preizkusi za objavo v trgovini prikazane te podrobnosti. Podrobnosti preizkusa so urejene v štiri tabele, kot je navedeno spodaj. Če želite več podrobnosti, v tabeli pri vrstici s preizkusom, ki si ga želite ogledati, izberite puščico desno.

Osnutki

  • Ime preizkusa: Ime vašega preizkusa.
  • Objava v trgovini: Objava v trgovini, s katero se izvaja preizkus.
  • Vrsta preizkusa: Privzeti grafični elementi ali lokalizirano.
  • Podrobnosti: Število različic, ki so na voljo odstotku ciljnih uporabnikov.

V teku

  • Ime preizkusa: Ime vašega preizkusa.
  • Objava v trgovini: Objava v trgovini, s katero se izvaja preizkus.
  • Vrsta preizkusa: Privzeti grafični elementi ali lokalizirano.
  • Začetni datum: Kdaj se je preizkus začel.
  • Podrobnosti: Število različic, ki so na voljo, in odstotek uporabnikov.

Končano

  • Ime preizkusa: Ime vašega preizkusa.
  • Objava v trgovini: Objava v trgovini, s katero se izvaja preizkus.
  • Vrsta preizkusa: Privzeti grafični elementi ali lokalizirano.
  • Začetni datum: Kdaj se je preizkus začel.
  • Podrobnosti: Število različic, ki so na voljo, in odstotek uporabnikov.
  • Rezultat: Rezultat preizkusa.

Pretekli preizkusi

  • Ime preizkusa: Ime vašega preizkusa.
  • Objava v trgovini: Objava v trgovini, s katero se izvaja preizkus.
  • Vrsta preizkusa: Privzeti grafični elementi ali lokalizirano.
  • Začetni datum: Kdaj se je preizkus začel.
  • Končni datum: Kdaj se je preizkus končal.
  • Stanje: Uporabljeno ali neuporabljeno.
Ogled opisov statističnih podatkov, meritev in primerov

Ko izberete preizkus, si lahko ogledate meritve za uporabnike in namestitve, ki povzemajo uspešnost posameznih različic.

Meritve za uporabnike

Meritev Definicija
Uporabniki, ki so prvič namestili aplikacijo

Enolični uporabniki, ki so prvič namestili vašo aplikacijo med preizkusom. Podatki so prilagojeni, tako da se upošteva delež ciljnih skupin.

Obdržani uporabniki, ki so namestili aplikacijo (1 dan)

Enolični uporabniki, ki so prvič namestili vašo aplikacijo med preizkusom in jo obdržali vsaj en dan po namestitvi. Podatki so prilagojeni, tako da se upošteva delež ciljnih skupin.

Zadržane vnaprejšnje registracije – na voljo samo za izbrane partnerje Googla Play. Število uporabnikov, ki so se vnaprej registrirali in ostali vnaprej registrirani vsaj en dan.

Rezultati

Meritve, ki prikazujejo rezultate preizkusa, si lahko ogledate na dva načina:

  • Trenutno: število enoličnih uporabnikov.
  • Prilagojeno: število enoličnih uporabnikov, deljeno z deležem ciljnih skupin.

Če si želite ogledati absolutne podatke glede uporabnikov, ki so namestili aplikacijo, uporabite trenutne podatke. Če si želite ogledati podatke, ki so bili prilagojeni, tako da se upošteva delež ciljnih skupin (primer: Če je bila 90 % ciljnih skupin prikazana ena različica, 10 % ciljnih skupin pa druga), uporabite prilagojene podatke.

Izdelek Definicija in primeri
Uspešnost

Ocenjena sprememba uspešnosti namestitev v primerjavi s trenutno različico. Uspešnost bo prikazana šele, ko bo preizkus imel dovolj podatkov. V splošnem velja, da je obseg uspešnosti različice podrobnejši in natančnejši, dlje ko preskus traja in več podatkov ko zbere.

Primer: Če je imela ena od različic obseg uspešnosti od +5 % do +15 %, je sprememba nekje med tema vrednostima (najverjetnejša sprememba uspešnosti je njuno povprečje, in sicer približno +10 %).

Namestitve (prilagojeno)
  • Število namestitev med poskusom, deljeno z deležem ciljnih skupin.
  • Vključuje preizkuse, začete pred 24. januarjem 2019.
  • Če ste na primer izvedli preizkus z dvema različicama, ki sta uporabljali 90- oziroma 10-odstotni delež ciljnih skupin, ter je bilo število namestitev za posamezno različico A = 900 in B = 200, bo prilagojeno število namestitev prikazano kot A = 1000 (900/0,9) in B = 2000 (200/0,1).
Namestitve (trenutno)
  • Število namestitev, ki so še vedno nameščene danes.
  • Vključuje preizkuse, začete pred 24. januarjem 2019.

Meritve namestitev (zastarelo)

Te meritve so se uporabljale za preizkuse, začete pred 24. januarjem 2019. Preizkusi, ki so se začeli pred tem datumom, še vedno vključujejo te statistične podatke, novi preizkusi pa uporabljajo samo meritev za uporabnike, ki so prvič namestili aplikacijo, in meritev za obdržane uporabnike, ki so namestili aplikacijo (1 dan).

Meritev Definicija in primeri
Namestitve v aktivnih napravah
  • Število aktivnih naprav, v katerih so trenutno nameščene posamezne različice aplikacije, prilagojeno navzgor zaradi različnih ravni ciljnih skupin.
Namestitve glede na uporabnika
  • Število enoličnih uporabnikov, ki so namestili posamezno različico aplikacije v določenem dnevu, prilagojeno navzgor zaradi različnih ravni ciljnih skupin.
Odmestitve glede na uporabnika
  • Število odmestitev posamezne izvedbe aplikacije v določenem dnevu, prilagojeno navzgor zaradi različnih ravni ciljnih skupin.

Preizkusi z zastarelimi meritvami

Od septembra 2019 bodo preizkusi, ki bodo uporabljali katero koli zastarelo meritev, navedeno zgoraj, samodejno prekinjeni. Upoštevajte to pri načrtovanju in pri preizkusih objav v trgovini raje uporabite najnovejše meritve. 

Rezultate prekinjenih preizkusov si lahko ogledate v razdelku Prekinjeni preizkusi na strani s preizkusi objav v trgovini.

Prijava na obvestila glede preizkusov

Če želite prejemati obvestila in e-poštna sporočila, ko so preizkusi dokončani, določite nastavitve na strani Obvestila v Konzoli Play. 

Če želite izvedeti več o e-poštnih obvestilih, preberite o upravljanju podatkov o računu razvijalca.

Je bilo to uporabno?

Kako lahko to izboljšamo?

Potrebujete dodatno pomoč?

Poskusite te postopke:

false
Iskanje
Počisti iskanje
Zapiranje iskanja
Glavni meni
18329124164453004525
true
Iskanje v centru za pomoč
true
true
true
true
true
92637
false
false