A/B tesztek futtatása az áruházi adatlapoknál

Annak érdekében, hogy a fejlesztők számára további irányítási lehetőségek és átfogóbb statisztikai információk álljanak rendelkezésre, a közelmúltban módosítottuk az áruházi adatlapokkal kapcsolatos kísérleteket a Play Console-ban. Három új funkciót adtunk hozzá:

  • kísérletparaméter-konfiguráció;
  • a kísérlet elvégzéséhez szükséges minták és az idő becslésére használható számológép; és
  • konfidenciaintervallum, amely mostantól lehetővé teszi a kísérlet folyamatos felügyeletét. 

Az oldal tartalma a módosításoknak megfelelően módosult.

A jelen oldalon ismertetett funkciók még nem állnak rendelkezésre minden fejlesztő számára.

A Google Playen megjelenő áruházi adatlap kísérletek futtatásával optimalizálható. Segítségükkel megtalálhatók az alkalmazás számára leginkább hatékony lokalizált szövegek és grafikák. A fő és az egyéni áruházi adatlapokkal is futtathatók kísérletek.

A közzétett alkalmazások esetében tesztelheted, hogy a változatokat és az aktuális verziót összehasonlítva melyik teljesít a legjobban a telepítések tekintetében. Mielőtt beállítanád a tesztet, tekintsd át a hatékony kísérletek futtatásával kapcsolatos bevált módszereket.

Megjegyzés: A globális kísérleteket alapértelmezett grafikai kísérletekre neveztük át. Funkcióik ugyanazok, mint az átnevezés előtt.

A kísérletek típusai

Mindegyik alkalmazás esetében egy alapértelmezett grafikai kísérlet vagy legfeljebb öt lokalizált kísérlet futtatható egyidejűleg.

Alapértelmezett grafikai elemek

Az alapértelmezett grafikai kísérletekben grafikai elemekkel kísérletezhetsz alkalmazásod áruházbeli adatlapjának alapértelmezett nyelvén. Kipróbálhatod az alkalmazásikon, a kiemelésnél használt kép, a képernyőképek és a promóciós videó különböző változatait.

  • Ha alkalmazásod áruházi adatlapja csak egy nyelven áll rendelkezésre: Az összes felhasználó számára az alapértelmezett grafikai kísérletek jelennek meg.
  • Ha hozzáadtál lokalizált grafikai elemeket valamelyik nyelven: Az alkalmazást az adott nyelven megtekintő felhasználók kimaradnak az alkalmazás alapértelmezett grafikai kísérleteiből. Ha például az alkalmazás alapértelmezett nyelve angol, és rendelkezik egy francia nyelvre lokalizált, kiemelésnél használt képpel, akkor az alkalmazást francia nyelven használó felhasználók kimaradnak a kísérletből (még az ikon tesztelése esetén is).
Lokalizált (szöveg és képek)

A lokalizált kísérletekben legfeljebb öt nyelvre vonatkozóan kísérletezhetsz alkalmazásod ikonjával, kiemelt képével, képernyőképeivel, promóciós videójával, illetve alkalmazásod leírásaival. A kísérleti változatok csak azon felhasználók számára lesznek hozzáférhetők, akik az alkalmazásod áruházi adatlapját az általad kiválasztott nyelveken tekintik meg.

Ha alkalmazásod áruházi adatlapja csak egy nyelven áll rendelkezésre, akkor a lokalizált kísérleteket csak azok a felhasználók fogják látni, akik az alapértelmezett nyelven használják az alkalmazásodat.

1. lépés: A kísérlet létrehozása

Kísérlet létrehozása a Play Console-on:

  1. Nyisd meg a Play Console-t, majd lépj a Kísérletek az áruházi adatlappal oldalra (Növekedés >Áruházi jelenlét >Kísérletek az áruházi adatlappal).
  2. Kattints a Kísérlet létrehozása lehetőségre.
  3. Add meg a kísérlet részleteit:
    • Kísérlet neve: Add meg a kísérlet nevét (legfeljebb 50 karakter lehet).
    • Áruházi adatlap: Válaszd ki azt az áruházi adatlapot, amelyen futtatni szeretnéd a kísérletet.
    • Kísérlet típusa: Válaszd ki az Alapértelmezett grafikai kísérlet vagy a Lokalizált kísérlet lehetőséget.
  4. Kattints a Tovább gombra.
  5. Folytasd a folyamatot a „2. lépés: A kísérlet beállítása” című rész útmutatásai alapján.

2. lépés: A kísérlet beállítása

A kísérlet létrehozását követően kiválaszthatod a tesztelni kívánt áruházi adatlapot, változatokat és attribútumokat.

A kísérlet beállítása:

  1. Kövesd a képernyőn az áruházi adatlap kiválasztásával és a kísérleti célok – például a megcélzott mutató, a kísérlet közönsége, a változatok és egyéb beállítások – hozzáadásával kapcsolatban megjelenő utasításokat.
  2. A kísérlet megkezdéséhez lépj az oldal tetejére, és kattints a Kísérlet futtatása lehetőségre.
  3. A kísérlet beállításának későbbi befejezéséhez kattints a Mentés lehetőségre.
Mezőleírások, példák és tippek megtekintése

A kísérlet beállításakor meg kell adnod az áruházi adatlapra vonatkozó alábbi adatokat.

Mező Leírás Példák és tippek
Kísérlet neve

A kísérlet neve csak a Play Console-ban jelenik meg a kísérlet azonosítása céljából. A felhasználók számára nem látható.

  • „Világos ikon kísérlet”
  • „Logó kiemelésénél használt kép”
  • „Rövid leírás új szlogennel”
Áruházi adatlap A tesztelni kívánt (fő vagy egyéni) áruházi adatlap.

A kísérlet elindítása után az egyéni áruházi adatlap azzal a névvel jelenik meg, amellyel a kísérlet elején rendelkezett. Ha a kísérlet elindítását követően frissíted az egyéni áruházi adatlap nevét, a név nem módosul a kísérleten belül.

Annak érdekében, hogy ne legyen kavarodás a kísérletek futtatásakor, érdemes törölni a nem használt egyéni áruházi adatlapokat, majd szükség esetén újakat létrehozni.


A kísérlet beállításakor meg kell adnod a kísérlet céljaira vonatkozó alábbi adatokat. Ezek a beállításoka kísérlet pontosságát befolyásolják, valamint az eredmény eléréséhez szükséges telepítők mennyiségét is.

Mező Leírás Példák és tippek
Megcélzott mutató E mutató alapján határozzuk meg a kísérlet eredményét.

Két lehetősége van:

  • Megőrzött első alkalommal telepítők (ajánlott): Azon felhasználók száma, akik először telepítették az alkalmazást, és legalább 1 napig telepítve maradt az eszközükön.
  • Első alkalommal telepítők: Azon felhasználók száma, akik először telepítették az alkalmazást, függetlenül attól, hogy megőrizték-e.
Változatok Azon kísérleti változatok száma, amelyeket tesztelni szeretnél az aktuális Áruházi adatlapnál. Ha csak egyetlen változatot tesztelsz, akkor rövidebb ideig tart a kísérleted elvégzése.

Ha új változatot szeretnél a kísérletedhez adni, válassz másik lehetőséget a Változatok legördülő menüből.

Az aktuális változat mellett legfeljebb három változatot adhatsz hozzá kísérletenként.

Kísérlet közönsége

Az áruházi adatlap azon látogatóinak százalékos aránya, akik kísérleti változatot látnak az aktuális adatlap helyett.

Ezek a látogatók egyenlően oszlanak majd meg a kísérleti változatok között.

Ha a közönség értékeként 30%-ot adsz meg, akkor az alkalmazásod áruházi adatlapjára látogatók 70%-a az oldal jelenlegi változatát fogja látni.

Ha a közönség 30%-a van kiválasztva, és két változat szerepel a kísérletedben, akkor az egyes változatok a felhasználók 15%-a számára jelennek meg.

Egy adott kísérlet során egy-egy felhasználó kizárólag az oldalad jelenlegi verzióját fogja látni, vagy pedig annak egyetlen változatát.

Minimális észlelhető hatás A változatok és a kontrollcsoportok közötti minimális különbség, amely a jobban teljesítő meghatározásához szükséges. Ha a különbség kevesebb ennél, a kísérlet döntetlennek számít.  
Konfidenciaszint Milyen gyakran tartalmazza a kísérlet által megadott konfidenciaintervallum az Áruházi. adatlap valós teljesítményét.

A konfidenciaszint növelése csökkenti a téves pozitív észlelések valószínűségét.

Fontos: Ha a kísérlethez 90%-os konfidenciaszintet választasz, akkor tíz kísérlet közül egy téves pozitív lehet.

Attribútumok

Válaszd ki azt az elemtípust, amelyet tesztelni szeretnél az aktuális adatlappal összevetve.

A kísérletek leghatékonyabb futtatásához egyidejűleg egy attribútumot tesztelj.

Egy lokalizált kísérlet során csak a rövid és a teljes leírás tesztelhető.

A grafikus elemek tesztelésekor kövesd a méretre és fájltípusra vonatkozó követelményeket.


Ha a kísérlet céljaira vonatkozó adatok megadásakor rákattintasz a Becslések szerkesztése lehetőségre, szerkesztheted az alább felsorolt becsült napi értékeket. Ezek az értékek segítenek kiszámítani, hogy meddig fog tartani a kísérleted. Ezek az értékek eltérhetnek a megfigyelt teljesítménytől.

Mező Leírás Példák és tippek
Napi látogatások új felhasználóktól Az Áruházi adatlap azon látogatóinak becsült száma, akik korábban még nem telepítették az alkalmazásodat  
Konverziós arány Azon látogatók becsült százaléka, akik a megcélzott mutatódra konvertálódnak:

Ha a megcélzott mutatót az első alkalommal telepítők jelentik, akkor a konverziós arány azoknak a látogatóknak a becsült százalékos aránya, akik első alkalommal telepítőkké konvertálódnak.

Napi megőrzött első alkalommal telepítők

Azon felhasználók becsült száma, akik először telepítik majd az adott alkalmazást, és egy napnál tovább telepítve marad az eszközükön.

További információt a Statisztikák, mutatók és példák leírásainak megtekintése című szakaszban találsz.
Napi első alkalommal telepítők

Azon felhasználók becsült száma, akik meglátogatják az áruházi adatlapodat és először feltelepítik az adott alkalmazást.

További információt a Statisztikák, mutatók és példák leírásainak megtekintése című szakaszban találsz.

3. lépés: Az eredmények áttekintése és alkalmazása

Az eredmények áttekintése és alkalmazása:

  1. Nyisd meg a Play Console-t, majd lépj a Kísérletek az áruházi adatlappal oldalra (Növekedés >Áruházi jelenlét >Kísérletek az áruházi adatlappal).
  2. A felülvizsgálni kívánt kísérlet táblázatsorában válaszd a jobbra mutatót nyilat. Az alábbi A Kísérletek az áruházi adatlappal oldal táblázatai szakaszban további információt találsz a részletek megjelenítésének módjáról.
  3. Az „Eredmények” szakaszban megtekintheted a kísérlet eredményeinek összegzését. Az eredmények a megcélzott mutatón alapulnak.

    Az eredményekből kiderül, hogy melyik lehetőség teljesít a legjobban – vagy az aktuális áruházi adatlapodnál jobban. Emellett láthatod majd az eredménynek az adott lehetőség konfidenciaintervalluma és minimális észlelhető hatása alapján adott magyarázatát, továbbá (adott esetben) a javasolt intézkedést. Ha nem gyűlt össze elég adat ahhoz, hogy eredmény legyen közölhető, akkor előfordulhat, hogy a „Több adatra van szükség” üzenet jelenik meg eredményként.
     
  4. A következő művelet a kísérlet eredményeitől függ:
    • Ha valamelyik változat jól teljesített, akkor előfordulhat, hogy az adott javaslat alkalmazását ajánló javaslat lesz látható.
    • Ha eredményként a „Leave your experiment running to collect more data” (Ne zárd még le a kísérletet, hogy több adatot gyűjthess) jelenik meg, térj vissza később.
    • Ha több változat is jobban teljesít, mint az áruházi adatlap, vagy ha az eredmény „Döntetlen” lett, tekintse át az eredményeket, és döntsd el, hogy melyik változatot szeretnéd alkalmazni.
    • Ha a jelenlegi áruházi adatlap teljesített a legjobban, akkor kattints a Jelenlegi adatlap megtartása lehetőségre.
A Kísérletek az áruházi adatlappal oldal táblázatai

A kísérletek beállítása után a Kísérletek az áruházi adatlappal oldalon az alábbi információk jelennek meg. A kísérlet részletei négy táblázatba rendezve jelennek meg, az alábbiak szerint. További részletekért válaszd a megtekinteni kívánt kísérlet táblázatsorában a jobbra nyilat.

Vázlatok

  • Kísérlet neve: a kísérlet neve.
  • Áruházi adatlap: a kísérletben szereplő áruházi adatlap.
  • Kísérlet típusa: alapértelmezett grafikai kísérlet vagy lokalizált kísérlet.
  • Részletek: a megcélzott felhasználók bizonyos százaléka számára megjelenített változatok száma.

Folyamatban

  • Kísérlet neve: a kísérlet neve.
  • Áruházi adatlap: a kísérletben szereplő áruházi adatlap.
  • Kísérlet típusa: alapértelmezett grafikai kísérlet vagy lokalizált kísérlet.
  • Kezdés dátuma: a kísérlet futtatásának kezdete.
  • Részletek: a megcélzott felhasználók bizonyos százaléka számára megjelenített változatok száma.

Befejezve

  • Kísérlet neve: a kísérlet neve.
  • Áruházi adatlap: a kísérletben szereplő áruházi adatlap.
  • Kísérlet típusa: alapértelmezett grafikai kísérlet vagy lokalizált kísérlet.
  • Kezdés dátuma: a kísérlet futtatásának kezdete.
  • Részletek: a megcélzott felhasználók bizonyos százaléka számára megjelenített változatok száma.
  • Eredmény: a kísérlet eredménye.

Régebbi kísérletek

  • Kísérlet neve: a kísérlet neve.
  • Áruházi adatlap: a kísérletben szereplő áruházi adatlap.
  • Kísérlet típusa: alapértelmezett grafikai kísérlet vagy lokalizált kísérlet.
  • Kezdés dátuma: a kísérlet futtatásának kezdete.
  • Befejezés dátuma: a kísérlet végének dátuma.
  • Állapot: alkalmazott vagy nem alkalmazott.
Statisztikák, mutatók és példák leírásainak megtekintése

A kísérlet kiválasztását követően olyan, felhasználókra és telepítésre vonatkozó mutatókat tekinthetsz meg, amelyek összefoglalják az egyes változatok teljesítményét.

Felhasználói mutatók

Mutató Definíció
Első alkalommal telepítők

Azon egyedi felhasználók száma, akik a kísérlet során első alkalommal telepítették az alkalmazást. Az adatokat arányosan korrigáltuk, hogy megfeleljenek a közönség részarányának.

Megőrzött telepítők (1 nap)

Azon egyedi felhasználók száma, akik a kísérlet során első alkalommal telepítették az alkalmazást, és az alkalmazás legalább 1 napig telepítve volt náluk. Az adatokat arányosan korrigáltuk, hogy megfeleljenek a közönség részarányának.

Megtartott előregisztrációk – csak bizonyos Play-partnerek számára áll rendelkezésre Azon előregisztrált felhasználók száma, akik legalább 1 napig előregisztráltak maradtak.

Eredmény

A kísérlet eredményeit bemutató mutatókat két különböző módon tekintheted meg:

  • Aktuális: Egyedi felhasználók száma.
  • Arányosított: Az egyedi felhasználók száma osztva a közönség részarányával.

Ha a telepítők abszolút adatait szeretnéd megtekinteni, használd az aktuális adatokat. Ha olyan adatokat szeretnél áttekinteni, amelyeket különböző közönségrészarányoknak megfelelően korrigáltak (pl. Ha a célközönség 90%-a látta az egyik verziót, a célközönség 10%-a pedig a másik verziót, használj arányosított adatokat.

Elem Meghatározás és példák
Teljesítmény

A telepítési teljesítmény becsült változása az aktuális változathoz viszonyítva. A teljesítmény csak akkor jelenik meg, ha kísérleted elegendő adatot gyűjtött. Ha egy kísérlet régebb óta fut, és több idő van az adatgyűjtésre, akkor a változat teljesítménytartománya általában szűkebb és pontosabb.

Példa: Ha valamelyik változó 5–15%-os teljesítménytartománnyal rendelkezik, akkor a változás valamilyen köztes érték, teljesítményben bekövetkező változás legvalószínűbb értéke pedig a két szám átlaga, 10% körül alakul.

Telepítések (arányosan korrigálva)
  • A kísérlet során végzett telepítések száma osztva a közönség részarányával.
  • A 2019. január 24. előtt indult kísérleteknél szereplő mutató.
  • Ha például két változattal futtattál kísérletet, melyek a közönség 90%-os és 10%-os részét használták, és az egyes változatok telepítéseinek száma A = 900 és B = 200 volt, akkor az arányosan korrigált telepítések A = 1000 (900/0,9) és B = 2000 (200/0,1) értékkel jelennek meg.
Telepítések (aktuális állapot)
  • Azon telepítések száma, amelyek ma is telepítve vannak.
  • A 2019. január 24. előtt indult kísérleteknél szereplő mutató.

Telepítési mutatók (elavult)

Az alábbi mutatókat a rendszer a 2019. január 24. előtt indult kísérleteknél alkalmazta. Az említett dátum előtt indult kísérleteknél még ez a statisztika is szerepel, azonban az új kísérletek csak az Első alkalommal telepítők és a Megőrzött telepítők (1 nap) felhasználói mutatókat alkalmazzák.

Mutató Meghatározás és példák
Telepítések aktív eszközökön
  • Azon aktív eszközök száma, amelyeken az alkalmazás egyes változatai jelenleg telepítve vannak, arányosan növelve az eltérő közönségszintek szerinti kompenzálás érdekében.
Telepítések felhasználó szerint
  • Azon egyedi felhasználók száma, akik az alkalmazás egyes változatait telepítették egy adott napon, arányosan növelve az eltérő közönségszintek szerinti kompenzálás érdekében.
Eltávolítások felhasználó szerint
  • Az alkalmazás egyes változataihoz tartozó eltávolítások száma egy adott napon, arányosan növelve az eltérő közönségszintek kompenzálásaként.

Elavult mutatókat használó kísérletek

2019 szeptemberétől a fent felsorolt megszüntetett mutatók bármelyikét használó kísérleteket automatikusan leállítjuk. Vedd figyelembe ezt a tervezésben, és használd inkább az áruházi adatlap kísérleteinél található legújabb mutatókat.

A leállított kísérletek eredményei az Áruházi adatlap kísérletek oldalának Leállított kísérletek részében találhatók.

Feliratkozás a kísérletekkel kapcsolatos értesítésekre

Ha szeretnél értesítéseket és e-mailt kapni, amikor véget értek a kísérleteid, add meg beállításaidat a Play Console Értesítések oldalán.

Az e-mailben érkező értesítésekről a fejlesztői fiók adatainak kezelése oldalon tájékozódhatsz.

Hasznosnak találta?

Hogyan fejleszthetnénk?

További segítségre van szüksége?

Próbálja ki a következő lépéseket:

false
Keresés
Keresés törlése
A keresés bezárása
Főmenü
14982877320817258066
true
Keresés a Súgóoldalakon
true
true
true
true
true
92637
false
false