Покрећите A/B тестирања уноса у Продавници

Да бисмо програмерима пружили већу контролу и статистичку поузданост, недавно смо унели неке промене у експерименте за унос у продавници у Play конзоли. Додали смо три нове могућности:

  • конфигурација параметра експеримента;
  • калкулатор за процену узорака који су потребни и време до завршетка; и
  • интервали поверења који сада омогућавају непрекидно праћење. 

Ова страница је ажурирана и приказује те промене. 

Функције које су описане на овој страници још нису доступне свим програмерима.

Да бисте лакше оптимизовали унос у Продавници на Google Play-у, можете да покрећете експерименте да бисте пронашли графику и локализовани текст са најбољим учинком за апликацију. Можете да покрећете експерименте за главну страницу уноса у Продавници и странице прилагођених уноса у Продавници.

Када су у питању објављене апликације, можете да тестирате варијанте апликације у односу на актуелну верзију да бисте утврдили која има бољи учинак на основу података о инсталирањима. Пре него што подесите тест, прегледајте најбоље праксе за вођење ефикасних експеримената.

Напомена: Глобални експерименти су преименовани у експерименте са подразумеваном графиком. Задржали су исте функције које су имали пре него што су преименовани.

Типови експеримената

За сваку апликацију можете да покренете један експеримент са подразумеваном графиком или највише пет локализованих експеримената истовремено.

Подразумевана графика 

Помоћу експеримента са подразумеваном графиком можете да експериментишете са графиком на подразумеваном језику уноса апликације у Продавници. Можете да уврстите варијанте иконе апликације, насловне слике, снимака екрана и промотивног видеа.

  • Ако је унос у Продавници за апликацију доступан на само једном језику: Експерименти са подразумеваном графиком приказиваће се свим корисницима.
  • Ако сте додали локализовани графички материјал на одређеном језику: Корисници који прегледају апликацију на том језику изузимају се из експеримента са подразумеваном графиком за апликацију. На пример, ако је подразумевани језик апликације енглески, а насловна слика је локализована на француски, корисници који прегледају апликацију на француском неће бити уврштени у експеримент (чак и када тестирате икону).
Локализовани (за текст и слике)

Помоћу локализованог експеримента можете да експериментишете са иконом, насловном сликом, снимцима екрана и промотивним видеом апликације и/или са њеним описима на највише пет језика. Варијанте експеримента приказиваће се само корисницима који унос апликације у Продавници прегледају на језицима које изаберете.

Ако је унос апликације у Продавници доступан само на једном језику, локализовани експерименти ће бити приказани само корисницима који апликацију прегледају на подразумеваном језику.

1. корак: Направите експеримент

Да бисте направили експеримент у Play конзоли:

  1. Отворите Play конзолу и идите на страницу Експерименти за унос у продавници (Раст > Присуство у Продавници > Експерименти за унос у продавници).
  2. Кликните на Направи експеримент.
  3. Унесите детаље експеримента:
    • Назив експеримента: Унесите назив експеримента (највише 50 знакова).
    • Унос у Продавници: Изаберите унос у Продавници за који желите да покренете овај експеримент.
    • Тип експеримента: Одаберите Подразумевани графички експеримент или Локализовани експеримент.
  4. Кликните на Даље.
  5. Пређите на упутства у одељку „2. корак: Подесите експеримент“.

2. корак: Подесите експеримент

Када направите експеримент, можете да изаберете унос у Продавници, варијанте и атрибуте које желите да тестирате.

Да бисте подесили експеримент:

  1. Пратите упутства на екрану да бисте изабрали унос у Продавници и додали циљеве експеримента, као што су циљни показатељ, публика експеримента, варијанте и друга подешавања.
  2. Да бисте почели експеримент, идите на врх странице и кликните на Покрени експеримент.
  3. Да бисте касније довршили подешавање експеримента, кликните на Сачувај.
Погледајте описе поља, примере и савете

Информације о уносу у Продавници морате да наведете у наставку када подешавате експеримент.

Поље Опис Примери и савети
Назив експеримента

Назив експеримента је видљив у Play конзоли само ради идентификације експеримента и није видљив корисницима.

  • „Експеримент за светлу икону“
  • „Насловна слика логотипа“
  • „Кратак опис са новим слоганом“
Унос у Продавници Унос у Продавници (главни или прилагођени) који желите да тестирате.

Када покренете експеримент, назив прилагођеног уноса у Продавници се приказује уз назив који је имао на почетку експеримента. Ако ажурирате назив прилагођеног уноса у Продавници када експеримент почне, он се не мења у експерименту.

Да бисте избегли забуну приликом извођења експеримената, препоручујемо да избришете прилагођене уносе у Продавници који се не користе, па да направите нове по потреби.


При подешавању експеримента морате да наведете информације о циљевима експеримента у наставку. Ова подешавања ће утицати на тачност експеримента и на то колико је корисника који су инсталирали апликацију потребно да се добије резултат.

Поље Опис Примери и савети
Показатељ циља Показатељ који ће се користити за утврђивање резултата експеримента.

Имате две опције: 

  • Задржани корисници који су први пут инсталирали (препоручено): Број корисника који су први пут инсталирали апликацију и задржали је најмање 1 дан
  • Корисници који први пут инсталирају: Број корисника који су инсталирали апликацију по први пут, без обзира на то да ли су је задржали
Варијанте Број експерименталних варијанти за тестирање у односу на актуелни унос у Продавници. Тестирање једне варијанте значи да ће мање времена бити утрошено на обављање експеримента.

Да бисте додали нову верзију у експеримент, изаберите другу опцију у падајућем менију Варијанте.

Можете да додате највише три варијанте по експерименту, поред актуелне верзије.

Публика експеримента

Проценат посетилаца уноса у продавници који ће видети експерименталну варијанту уместо актуелног уноса. 

Ови посетиоци ће се једнако расподелити између експерименталних варијанти.

Ако унесете 30% за публику, преосталих 70% посетилаца странице уноса у Продавници видеће актуелну верзију странице.

Ако имате публику од 30% и две варијанте у експерименту, 15% корисника видеће једну варијанту, а других 15% другу.

Сваки корисник ће видети само једну варијанту или актуелну верзију странице током експеримента.

Минимални уочљиви ефекат Минимална разлика између варијанти и контрола потребна да се утврди која има бољи учинак. Ако је разлика мања од ове, сматраће се да експеримент има неутралан учинак.  
Ниво поузданости Колико често интервал поверења који пружа експеримент садржи прави учинак уноса у Продавнци.

Повећањем нивоа поузданости се смањује вероватноћа лажног позитивног резултата.

Напомена: Ако одаберете ниво поузданости од 90% за експеримент, то значи да један од десет експеримената може да пријави лажан позитиван резултат

Атрибути

Изаберите тип ставке који желите да тестирате у поређењу са актуелним уносом.

Да бисте ефикасно обављали експерименте, тестирајте сваки атрибут појединачно.

Кратак и комплетан опис можете да тестирате само током локализованог експеримента.

Ако тестирате графички материјал, водите рачуна да пратите захтеве за величину и тип фајла.


Ако кликнете на Измени процене када уносите информације о циљевима експеримента, можете да измените процењене дневне вредности наведене у наставку. Ове вредности ће вам помоћи да израчунате колико дуго ће експеримент трајати. Могу да се разликују од стварног учинка.

Поље Опис Примери и савети
Дневни број посета нових корисника Процењени број посетилаца уноса у Продавници који раније нису инсталирали апликацију  
Стопа конверзије Процењени проценат посетилаца који ће остварити конверзију у циљни показатељ.

На пример, ако су циљни показатељ корисници који први пут инсталирају, стопа конверзије ће бити процењени проценат посетилаца који ће остварити конверзију у кориснике који први пут инсталирају.

Дневни број корисника који први пут инсталирају апликацију

Процењени број корисника који ће први пут инсталирати апликацију и задржати је више од једног дана.

Сазнајте више у чланку Погледајте описе статистичких података, показатеља и примера.
Дневни број корисника који први пут инсталирају

Процењени број корисника који ће посетити унос у Продавници и први пут инсталирати апликацију.

Сазнајте више у чланку Погледајте описе статистичких података, показатеља и примера.

3. корак: Прегледајте и примените резултате

Да бисте прегледали и применили резултате:

  1. Отворите Play конзолу и идите на страницу Експерименти за унос у продавници (Раст > Присуство у Продавници > Експерименти за унос у продавници).
  2. Изаберите стрелицу удесно у реду табеле експеримента који желите да прегледате. Погледајте табеле за експерименте за унос у продавници у наставку да бисте сазнали више о томе како се приказују детаљи.
  3. У одељку Резултати погледајте резиме резултата експеримента. Резултати се заснивају на циљном показатељу.

    Резултати ће вам показати које опције имају најбољи учинак или бољи учинак од актуелног уноса у Продавници. Видећете и објашњење овог резултата на основу интервала поверења и минималног видљивог ефекта, као и препоручене радње (ако је примењиво). Резултат „Потребно је још података“ можете да добијете ако није прикупљено довољно података за резултат.
     
  4. Следећа радња зависи од резултата експеримента: 
    • Ако је варијанта имала добар учинак, можете да видите препоруку да је примените.
    • Ако је резултат „Напустите експеримент да бисте прикупили још података“, вратите се касније.
    • Ако је више варијанти имало бољи учинак од уноса у Продавници или је резултат био „нерешен“, прегледајте резултате и одлучите коју варијанту желите да примените. 
    • Ако је актуелни унос у Продавници имао најбољи учинак, треба да кликнете на Задржи актуелни унос.
Табеле за експерименте за унос у продавници

Када подесите експерименте, видећете следеће податке на страници Експерименти за унос у продавници. Детаљи експеримента су организовани у четири табеле, као што је наведено у наставку. Да бисте добили још података, изаберите стрелицу надесно у реду табеле експеримента који желите да прегледате.

Радне верзије

  • Назив експеримента: Назив експеримента
  • Унос у Продавници: Унос у Продавници у ком је експеримент активан
  • Тип експеримента: Подразумевана или локализована графика
  • Детаљи: Број варијанти које се приказују проценту циљних корисника

У току

  • Назив експеримента: Назив експеримента
  • Унос у Продавници: Унос у Продавници у ком је експеримент активан
  • Тип експеримента: Подразумевана или локализована графика
  • Датум почетка: Када је експеримент почео
  • Детаљи: Број варијанти које се приказују и проценат корисника

Завршено

  • Назив експеримента: Назив експеримента
  • Унос у Продавници: Унос у Продавници у ком је експеримент активан
  • Тип експеримента: Подразумевана или локализована графика
  • Датум почетка: Када је експеримент почео
  • Детаљи: Број варијанти које се приказују и проценат корисника
  • Исход: Резултат експеримента

Ранији експерименти

  • Назив експеримента: Назив експеримента
  • Унос у Продавници: Унос у Продавници у ком је експеримент активан
  • Тип експеримента: Подразумевана или локализована графика
  • Датум почетка: Када је експеримент почео
  • Датум завршетка: Када се експеримент завршио
  • Статус: Примењено или није примењено
Погледајте описе статистичких података, показатеља и примера

Када изаберете експеримент, можете да прегледате показатеље о корисницима и инсталирањима који сумирају учинак сваке варијанте.

Показатељи о корисницима

Показатељ Дефиниција
Корисници који први пут инсталирају

Јединствени корисници који су инсталирали апликацију први пут током експеримента. Подаци су сразмерно увећани да би се узео у обзир различит удео публике.

Корисници који су инсталирали и задржали софтвер (1 дан)

Јединствени корисници који су инсталирали апликацију први пут и задржали је бар 1 дан после инсталације током експеримента. Подаци су сразмерно увећани да би се узео у обзир различит удео публике.

Задржане регистрације унапред – доступно је само за изабране Play партнере Број корисника који су се регистровали унапред и остали регистровани унапред бар 1 дан.

Резултати

Можете да прегледате показатеље који приказују резултате експеримента на два различита начина:

  • Актуелни: Број јединствених корисника
  • Сразмерно увећани: Број јединствених корисника подељен према уделу публике

Ако желите да прегледате свеобухватне податке о корисницима који су инсталирали софтвер, употребите актуелне податке. Ако желите да прегледате податке који су сразмерно увећани да би се узели у обзир различити удели публике (пример: Ако је 90% публике видело једну верзију, а 10% публике другу), употребите сразмерно увећане податке.

Ставка Дефиниција и примери
Учинак

Процењена промена у учинку инсталирања у поређењу са актуелном верзијом. Учинак ће се приказати тек када експеримент прикупи довољно података. У принципу, што дуже је експеримент активан и прикупља податке, то ће опсег учинка варијанте бити ужи и прецизнији.

Пример: Ако је једна од варијанти имала опсег учинка од +5% до +15%, промена је негде између ових вредности, при чему ће промена учинка највероватније бити аритметичка средина ове две вредности, тј. око +10%.

Инсталирања (увећан број)
  • Број инсталирања током експеримента подељен према уделу публике.
  • Користи се за експерименте започете пре 24. јануара 2019.
  • На пример, ако обављате експеримент са две варијанте за које је удео публике 90%/10%, а број инсталирања за сваку варијанту је А = 900 и Б = 200, сразмерно увећани број инсталирања би се приказивао као А = 1000 (900/0,9) и Б = 2000 (200/0,1).
Инсталирања (актуелни број)
  • Број корисника који су инсталирали и задржали апликацију данас.
  • Користи се за експерименте започете пре 24. јануара 2019.

Показатељи инсталирања (застарело)

Следећи показатељи су коришћени за експерименте започете пре 24. јануара 2019. Експерименти започети пре тог датума и даље обухватају ове статистичке податке, али нови експерименти користе само показатеље за кориснике „Корисници који први пут инсталирају“ и „Корисници који су инсталирали и задржали софтвер (1 дан)“.

Показатељ Дефиниција и примери
Инсталирања на активним уређајима
  • Број активних уређаја на којима је свака варијанта апликације тренутно инсталирана, сразмерно увећан да би се надокнадили различити нивои публике.
Број инсталирања према кориснику
  • Број јединствених корисника који су инсталирали сваку варијанту апликације у датом дану, сразмерно увећан како би се обухватили различити нивои публике.
Број деинсталирања према кориснику
  • Број деинсталирања сваке варијанте апликације у датом дану, сразмерно увећан како би се обухватили различити нивои публике.

Експерименти који користе застареле показатеље

Од септембра 2019. експерименти који користе претходно наведене застареле показатеље биће аутоматски укинути. Узмите ово у обзир при планирању и користите најновије показатеље за експерименте за унос у продавници. 

Резултате укинутих експеримената можете да прегледате у одељку Укинути експерименти на страници Експерименти за унос у продавници.

Региструјте се за обавештења о експериментима

Да бисте примали обавештења и имејлове када се експерименти заврше, обавезно подесите подешавања на страници Обавештења у Play конзоли. 

Да бисте сазнали више о обавештењима имејлом, идите на управљање информацијама за налог програмера.

Да ли вам је ово било корисно?

Како то можемо да побољшамо?

Треба вам додатна помоћ?

Пробајте следеће кораке:

false
Претрага
Обриши претрагу
Затвори претрагу
Главни мени
1307243917455658745
true
Центар за помоћ за претрагу
true
true
true
true
true
92637
false
false