A / B versijų testavimas parduotuvės įraše

Norėdami optimizuoti parduotuvės įrašą sistemoje „Google Play“, galite vykdyti eksperimentus ir rasti efektyviausius programos grafinius elementus bei lokalizuotą tekstą. Galite vykdyti pagrindinių ir tinkintų parduotuvės įrašų puslapių eksperimentus.

Jei programa paskelbta, galite išbandyti programos variantus ir palyginti su dabartinės versijos programa, kad sužinotumėte, kurio varianto našumas geriausias, atsižvelgiant į diegimų duomenis. Prieš nustatydami testavimą, peržiūrėkite geriausios efektyvių eksperimentų vykdymo praktikos pavyzdžius.

Pastaba: visuotiniai eksperimentai buvo pervardyti į numatytosios grafikos eksperimentus. Jie palaiko tas pačias funkcijas kaip ir prieš pervardijant.

Eksperimentų tipai

Kiekvienoje programoje vienu metu galite vykdyti vieną numatytosios grafikos eksperimentą arba iki penkių lokalizuotų eksperimentų.

Numatytosios grafikos 

Vykdydami numatytosios grafikos eksperimentą galite eksperimentuoti su grafiniais elementais programos numatytąja parduotuvės įrašo kalba. Galite įtraukti programos piktogramos, funkcijos grafikos, ekrano kopijų ir reklaminių vaizdo įrašų variantus.

  • Jei programos parduotuvės įrašas pasiekiamas tik viena kalba: numatytosios grafikos eksperimentai bus rodomi visiems naudotojams.
  • Jei pridėjote bet kokių lokalizuotų grafinių išteklių tam tikra kalba: naudotojai, peržiūrintys jūsų programą ta kalba, išskiriami iš programos numatytosios grafikos eksperimentų. Pavyzdžiui, jei programos numatytoji kalba yra anglų ir joje yra lokalizuota funkcijos grafika prancūzų kalba, šia kalba programą peržiūrintys naudotojai bus išskirti iš eksperimento (net jei vykdote piktogramos eksperimentą).
Lokalizuotas (skirtas tekstui ir grafiniams elementams)

Naudodami lokalizuotą eksperimentą, galite eksperimentuoti su programos piktograma, funkcijos grafika, ekrano kopijomis, reklaminiais vaizdo įrašais ir (arba) programos aprašais iki penkių kalbų. Eksperimento variantai bus rodomi tik naudotojams, kurie programos parduotuvės įrašą peržiūri jūsų pasirinktomis kalbomis.

Jei programos parduotuvės įrašas pasiekiamas tik viena kalba, lokalizuoti eksperimentai bus rodomi tik naudotojams, kurie programą peržiūri numatytąja kalba.

1 veiksmas: sukurkite eksperimentą

Galite sukurti eksperimentą naudodami „Play Console“. Kai būsite pasirengę peržiūrėti ir pritaikyti rezultatus, galėsite naudoti „Play Console“ arba „Play Console“ programą.

Numatytosios grafikos
  1. Atidarykite „Play Console“.
  2. Pasirinkite programą.
  3. Kairiajame meniu spustelėkite Pateikimas parduotuvėje Parduotuvės įrašo eksperimentai.
  4. Spustelėkite Naujas eksperimentas.
  5. Skiltyje „Numatytosios grafikos“ spustelėkite Sukurti.
  6. Vadovaukitės skiltyje „2 veiksmas: nustatykite eksperimentą“ pateiktomis instrukcijomis.
Lokalizuotas
  1. Atidarykite „Play Console“.
  2. Pasirinkite programą.
  3. Kairiajame meniu spustelėkite Pateikimas parduotuvėje Parduotuvės įrašo eksperimentai.
  4. Spustelėkite Naujas eksperimentas.
  5. Skiltyje „Lokalizuotas“ pasirinkite kalbą.
  6. Spustelėkite Sukurti.
  7. Vadovaukitės skiltyje „2 veiksmas: nustatykite eksperimentą“ pateiktomis instrukcijomis.

Suaktyvinę eksperimentą viena kalba galite pridėti iki keturių kitų kalbų. Jei norite pridėti daugiau eksperimentų, atlikite toliau nurodytus veiksmus.

  1. Grįžkite į puslapį Parduotuvės įrašų eksperimentai.
  2. Pasirinkite Naujas eksperimentas.
    • Jei negalite pasirinkti Naujas eksperimentas, įsitikinkite, kad eksperimentas nėra išsaugotas kaip juodraštis. Eksperimentų juodraščiai turi būti suaktyvinti, kad galėtumėte pridėti naujų kalbų.

2 veiksmas: nustatykite eksperimentą

Sukūrę eksperimentą galite pasirinkti parduotuvės įrašą, variantus ir atributus, kuriuos norite testuoti.

Norėdami nustatyti eksperimentą, atlikite toliau nurodytus veiksmus.

  1. Vykdydami ekrane pateikiamas instrukcijas pasirinkite parduotuvės įrašą ir pridėkite taikymo informacijos, atributų ir variantų.
  2. Jei norite pradėti eksperimentą, eikite į puslapio viršų ir spustelėkite Vykdyti eksperimentą.
  3. Jei norite eksperimento sąranką užbaigti vėliau, spustelėkite Išsaugoti.
Žr. laukų aprašus, pavyzdžius ir patarimus
Laukas Aprašas Pavyzdžiai ir patarimai
Pavadinimas
  • Eksperimento pavadinimas matomas tik sistemoje „Play Console“, kad jį būtų galima identifikuoti, ir jis nėra rodomas naudotojams.
  • „Šviesios piktogramos eksperimentas“
  • „Logotipo funkcijos grafika“
  • „Trumpas aprašas su nauju šūkiu“
Parduotuvės įrašo pavadinimas
  • Norimas testuoti parduotuvės įrašas (pagrindinis arba tinkintas).
  • Kai pradedate eksperimentą, tinkinto parduotuvės įrašo pavadinimas rodomas kartu su pavadinimu, kurį įrašas turėjo prieš pradedant eksperimentą. Jei pradėję eksperimentą atnaujinsite tinkinto parduotuvės įrašo pavadinimą, eksperimente rodomas pavadinimas nebus pakeistas.
  • Kad vykdant eksperimentus būtų išvengta painiavos, patartina ištrinti nenaudojamus tinkintus parduotuvės įrašus ir prireikus sukurti naujų.
Auditorija
  • Eksperimento variantą matančių naudotojų procentinė dalis.
  • Auditorija bus tolygiai paskirstyta tarp eksperimento variantų, atsižvelgiant į pasirinktas procentines dalis.
  • Jei kaip auditoriją įvesite 30 %, kiti 70 % parduotuvės įrašo lankytojų matys dabartinės versijos puslapį.
  • Pavyzdžiui, jei nustatėte 30 % auditoriją ir du eksperimento variantus, kiekvienas variantas rodomas 15 % naudotojų.
  • Vykdant eksperimentą kiekvienam naudotojui bus rodomas tik atskiras variantas arba dabartinė puslapio versija.
Atributai
  • Pasirinkite elemento tipą, kurį norite išbandyti lygindami su dabartiniu įrašu.
  • Kad eksperimentai būtų kuo efektyvesni, vienu metu išbandykite vieną atributą.
  • Trumpą ir visą aprašus galite išbandyti tik lokalizuotuose eksperimentuose.
  • Jei išbandote grafinius išteklius, būtinai atsižvelkite į dydžio ir failo tipo reikalavimus.
Variantai
  • Jei norite prie eksperimento pridėti naują versiją, spustelėkite Pridėti kitą variantą.
  • Be dabartinės versijos, viename eksperimente galite pridėti iki 3 variantų.

3 veiksmas: peržiūrėkite ir pritaikykite rezultatus

Nustačius eksperimentus Parduotuvės įrašų eksperimentų puslapyje bus pateikta toliau nurodyta išsami informacija. Jei norite gauti daugiau išsamios informacijos, pasirinkite eksperimentą.

Aktyvūs eksperimentai

  • Eksperimentas: pavadinkite eksperimentą.
  • Būsena: variantų, teikiamų tam tikram procentui naudotojų, skaičius.
  • Pradžios data: eksperimento pradžios data.
  • Rezultatai: eksperimento rezultatai arba duomenų būsena.

Užbaigti eksperimentai

  • Eksperimentas: pavadinkite eksperimentą.
  • Tipas: numatytosios grafikos arba lokalizuotas.
  • Pradžios data: eksperimento pradžios data.
  • Pradžios data: eksperimento pabaigos data.
  • Rezultatai: pritaikyti arba nepritaikyti.
Naudojant „Play Console“ svetainę
  1. Atidarykite „Play Console“.
  2. Pasirinkite programą.
  3. Kairiajame meniu spustelėkite Pateikimas parduotuvėje > Parduotuvės įrašų eksperimentai.
  4. Pasirinkite norimą peržiūrėti eksperimentą.
  5. Šalia „Metrika“ pasirinkite metriką.
  6. Peržiūrėkite rezultatus.
    • Jei norite pritaikyti variantą, kurio našumas buvo geresnis nei dabartinės versijos programos, pasirinkite Taikyti laimėtoją. Galite peržiūrėti parduotuvės įrašo pakeitimus, kol jie dar nepaskelbti.
    • Jei norite naudoti dabartinę versiją, pasirinkite Palikti. Bus atnaujintas parduotuvės įrašas, kad būtų naudojama dabartinė versija, ir eksperimentas bus baigtas.
    • Jei eksperimento rezultatai vienodi, pasirinkite Stabdyti eksperimentą.

Pastaba: atsižvelgiant į pasirinktą metriką, atskirų variantų našumo rezultatai gali skirtis. Kad pasiektumėte geriausių rezultatų, peržiūrėkite visą pasiekiamą metriką prieš nuspręsdami, kurį variantą naudoti.

Naudojant „Play Console“ programą
  1. Atidarykite „Play Console“ programą „Play Console“ programa.
  2. Pasirinkite programą.
  3. Slinkite žemyn iki kortelės „Eksperimentai“. Jei reikia daugiau informacijos apie programos eksperimentus, palieskite Peržiūrėti išsamią informaciją. Išsamiame rodinyje palieskite variantą, kad peržiūrėtumėte to eksperimento auditoriją, dabartinę versiją ir diegimų mastelį.
    • Jei norite pritaikyti variantą, kurio našumas buvo geresnis nei dabartinės versijos programos, pasirinkite Taikyti laimėtoją. Galite peržiūrėti parduotuvės įrašo pakeitimus, kol jie dar nepaskelbti.
    • Jei norite naudoti dabartinę versiją, pasirinkite Palikti dabartinę. Bus atnaujintas parduotuvės įrašas, kad būtų naudojama dabartinė versija, ir eksperimentas bus baigtas.

Pastaba: našumo rezultatai nustatomi pagal pirmą kartą įdiegusių naudotojų skaičių. Jei norite peržiūrėti rezultatus pagal papildomą metriką, apsilankykite „Play Console“ svetainėje.

 

Statistikos, metrikos ir pavyzdžių peržiūra

Pasirinkę eksperimentą galite peržiūrėti naudotojų ir įdiegimų metriką, apibendrinančią kiekvieno varianto našumą.

Naudotojų metrika

Metrika Apibrėžimas
Pirmą kartą įdiegę naudotojai
  • Unikalūs naudotojai, kurie įdiegė programą pirmą kartą vykdant eksperimentą. Duomenys padidinti, kad būtų atsižvelgta į auditorijos dalį.
Įdiegę ir nepašalinę asmenys (1 d.) – pasiekiama tik „Play“ parduotuvės svetainėje
  • Unikalūs naudotojai, kurie įdiegė programą pirmą kartą ir ją pasiliko bent 1 dieną nuo įdiegimo vykdant eksperimentą. Duomenys padidinti, kad būtų atsižvelgta į auditorijos dalį.

Rezultatai

Eksperimento rezultatus nurodančią metriką galite peržiūrėti dviem skirtingais būdais.

  • Dabartinis: unikalių naudotojų skaičius
  • Padidintas: unikalių naudotojų skaičius, padalytas iš auditorijos dalies

Jei norite peržiūrėti absoliučius įdiegusių žmonių duomenis, naudokite dabartinius duomenis. Jei norite peržiūrėti duomenis, kurie buvo padidinti, kad būtų atsižvelgta į skirtingas auditorijos dalis (pvz., jei 90 proc. auditorijos buvo rodoma viena versija, o 10 proc. – kita), naudokite padidintus duomenis.

Metrika Apibrėžtis ir pavyzdžiai
Įdiegę žmonės
  • Unikalių naudotojų, kurie įdiegė programą pirmą kartą, skaičius.
Įdiegę ir nepašalinę asmenys
  • Unikalių naudotojų, kurie įdiegė programą pirmą kartą ir ją pasiliko bent 1 dieną nuo įdiegimo, skaičius.
Našumas
  • Numatomas diegimo našumo pokytis, palyginti su dabartine versija. Yra 90 % tikimybė, kad variantas bus našus pateiktame diapazone per laiką. Kadangi diapazonas nustatomas pagal varianto našumą, šie skaičiai skirsis vykdant eksperimentą.
  • Varianto didelio ir mažo apytikslio diegimo našumo pokyčio vidurkis nurodo numatomą varianto našumo pokytį.
  • Pvz., jei vieno iš variantų našumo diapazonas yra nuo + 5 % iki + 15 %, tikėtinas našumo pokytis yra abiejų skaičių vidurkis – apie + 10 %.
  • Našumas rodomas, kai eksperimente sulaukiama pakankamai duomenų. Apskritai, jei eksperimentas vykdomas ilgiau ir leidžiama ilgiau rinkti duomenis, nustatomas siauresnis ir tikslesnis varianto našumo diapazonas.
Įdiegimai (padidinta) – nebenaudojama
  • Diegimų skaičius vykdant eksperimentą, padalytas iš auditorijos dalies.
  • Įtraukiama į eksperimentus, pradėtus iki 2019 m. sausio 24 d.
  • Pavyzdžiui, jei vykdėte eksperimentą su dviem variantais, kuriuose naudotos 90 % / 10 % auditorijos dalys, o kiekvieno varianto diegimų skaičius buvo toks: A = 900 ir B = 200, diegimų mastelis būtų toks: A = 1 000 (900 / 0,9) ir B = 2 000 (200 / 0,1).
Įdiegimai (dabar) – nebenaudojama
  • Skaičius, kiek programų vis dar įdiegta šiandien.
  • Įtraukiama į eksperimentus, pradėtus iki 2019 m. sausio 24 d.

Įdiegimo metrika (nebenaudojama)

Toliau nurodyta metrika buvo naudojama eksperimentuose, pradėtuose iki 2019 m. sausio 24 d. Eksperimentai, kurie buvo pradėti iki šios datos, vis dar apima šią statistiką, bet naujuose eksperimentuose naudojama tik pirmą kartą įdiegusių naudotojų ir įdiegusių ir nepašalinusių asmenų (1 d.) naudotojų metrika

Metrika Apibrėžtis ir pavyzdžiai
Diegimai aktyviuose įrenginiuose
  • Aktyvių įrenginių, kuriuose šiuo metu įdiegtas kiekvienas programos variantas, skaičius, padidintas siekiant kompensuoti dėl skirtingų auditorijos lygių.
Įdiegimai pagal naudotoją
  • Unikalių naudotojų, kurie nurodytą dieną įdiegė kiekvieną programos variantą, skaičius, padidintas siekiant kompensuoti dėl skirtingų auditorijos lygių.
Pašalinimai pagal naudotoją
  • Kiekvieno programos varianto pašalinimų skaičius nurodytą dieną, padidintas siekiant kompensuoti dėl skirtingų auditorijos lygių.

Eksperimentai, atliekami naudojant nebenaudojamas metrikas

Nuo 2019 m. rugsėjo mėn. eksperimentai, vykdomi naudojant prieš tai išvardytų nebenaudojamų tipų metriką, bus automatiškai nutraukti. Turėkite tai omenyje planuodami eksperimentus ir verčiau naudokite naujausių tipų metriką, skirtą parduotuvės įrašų eksperimentams. 

Nutrauktų eksperimentų rezultatus galite peržiūrėti skiltyje Nutraukti eksperimentai, esančioje eksperimentų puslapyje Parduotuvės įrašas.

Prisiregistravimas gauti pranešimus apie eksperimentus

Jei norite gauti pranešimus ir el. laiškus, kai eksperimentai bus baigti, būtinai nustatykite pranešimų nuostatą sistemoje „Play Console“.

Jei norite daugiau sužinoti apie el. pašto pranešimus, eikite į skiltį apie kūrėjo paskyros informacijos tvarkymą.

Ar tai buvo naudinga?
Kaip galime jį patobulinti?

Reikia daugiau pagalbos?

Prisijunkite, kad būtų pateikta papildomų palaikymo parinkčių ir problema būtų greitai išspręsta