Преглед
Експерименти са ценама вам омогућавају да покрећете A/B тестирања и да користите резултате да бисте поуздано и прецизно прилагођавали цене апликације у складу са куповном моћи на различитим тржиштима широм света. Експерименте са ценама можете да користите и да бисте тестирали различите изабране цене у односу на контролну цену на основним тржиштима и остварили већи приход. Подешавање оптималних цена за производе у апликацији у различитим земљама или регионима обезбеђује да ћете примењивати најбољу стратегију одређивања цена за апликацију како бисте наставили да увећавате приход и истовремено привлачите нове кориснике. Пошто се ова функција заснива на ценама и продаји производа у апликацији, морате да будете продавац и програмер да бисте је користили.
Припремите и покрените експеримент са ценама
Одељци у наставку пружају упутства и важне информације о припреми и покретању експеримената са ценама, као и разумевању њихових резултата.
Пре него што почнете
Проширите и прочитајте сваки одељак у наставку пре него што почнете да подешавате експеримент са ценама у Play конзоли.
Предуслови- За експерименте можете да користите само активне производе у апликацији.
- Корисници морају да имају дозволе Управљање присуством у продавници и Преглед финансијских података да би користили експерименте са ценама.
Опште информације
- Експерименти се спроводе само на нивоу апликације. Не можете да покрећете експерименте у више апликација.
- Експеримент може да траје највише шест месеци, после чега се цене враћају на првобитну цену. Цене ће се такође вратити на првобитну вредност 14 дана након што постану статистички значајне.
- У једном експерименту можете да тестирате највише 1000 производа у апликацији.
- Исти експеримент са производима у апликацији и земљама који се преклапају не можете да покренете најмање 30 дана после завршетка првобитног експеримента.
- Не можете да паузирате експерименте. Можете само да их покренете или у потпуности зауставите. Заустављени експеримент не можете поново да покренете.
Ограничења за земље или регионе
- У одређеном тренутку можете да имате само један активан експеримент у било којој земљи или региону. На пример, ако већ имате активан експеримент у Норвешкој, не можете да покренете други експеримент за друге производе ако не зауставите први експеримент и направите други.
- Тестирана цена мора да буде у дефинисаним опсезима цена за куповине у апликацији. Ако је проценат цене ван дефинисаног опсега цена за ту земљу или регион у оквиру експеримента, проценат цене се аутоматски зауставља на граничној вредности.
- Можете да имате највише две варијанте цене и контролну цену за сваки експеримент.
- Експерименти се примењују само у изабраним земљама или регионима, али не и у повезаним заменама за локацију. На пример, ако обављате експеримент у Француској, ово не укључује повезане француске територије (Валис и Футуну, Гвадалупе, Мајот, Мартиник, Нову Каледонију, Реунион, Свети Бартоломеј, Свети Мартин, Сент Пјер и Микелон, Француску Гвајану, Француску Полинезију).
Промене производа у апликацији
- Не можете да промените цену производа у апликацији који је истакнут у активном експерименту. Да бисте променили цену, морате да зауставите експеримент. Напомена:
- Једини изузеци су покретање два експеримента и примена резултата првог експеримента. Осим тога, ако је производ у апликацији повезан са шаблоном за цене, можете да промените цене производа у апликацији само за земље које нису део експеримента.
- Ако конфигуришете нов производ у апликацији током активног експеримента, он ће бити изостављен из експеримента.
Покретање експеримената и примена резултата
- У сваком тренутку можете да примените цене експеримента, али вам препоручујемо да сачекате да резултати буду статистички значајни и да примените само промене цена које имају бољи учинак у односу на контролну групу.
- У експеримент који је тренутно активан не можете да додате још земаља или региона нити производа.
- Ако су један или више производа повезани са шаблоном за цене, применом цена ћете ажурирати цене за земљу или регион експеримента и опозвати везу ових производа са шаблонима.
Експерименти у великој мери користе статистичку терминологију. Ако нисте упознати са овим терминима, може да вам буде корисно да погледате речник термина у наставку.
| Термин | Дефиниција | Напомене |
|---|---|---|
| Интервал поверења |
Опсег вредности које изражавају неизвесност око тога да ли је резултат статистички значајан. |
Ово је кључни сигнал помоћу кога се тумаче исходи експеримента. Статистички значај се одређује када се интервал поверења не укршта са 0. То се можда неће приказивати првих неколико дана због малих количина података. |
| Ниво поузданости |
Вероватноћа за коју је тачна уочена разлика између варијанте и контролне групе. Пример: Ниво поузданости од 90% значи да је у 10% случајева уочена разлика вероватно последица случајности. Другим речима, постоји мање од 10% шансе да су подаци који се тестирају могли да се јаве ако нема разлике између контролне групе и варијанте. |
|
| Контролна цена | Првобитна променљива за тестирање (која садржи првобитну цену куповине у апликацији) у грани експеримента. | Контролну цену види део публике експеримента дефинисан током подешавања и сви корисници ван експеримента. |
| Исход експеримента | Резултат експеримента. | Могући исходи експеримента су наведени у следећем одељку. |
| Лажно позитиван | Када је негативан догађај погрешно категоризован као позитиван. |
Када утврдимо да је разлика у потрошњи између контролних цена и теста статистички значајна (позитивна), али разлика у потрошњи између контролних цена и теста заправо није статистички значајна (негативна), сматра се лажно позитивном. Лажно позитивна стопа је однос броја лажних позитивних резултата и укупног броја стварних негативних догађаја. |
| Производи у апликацији |
Ставке за које се корисницима наплаћује једнократно. Производи у апликацији могу да обухватају ставке попут виртуелне робе (на пример, нивои у игри или напици) и премијум услуга у апликацији на Google Play-у. |
Можете да одаберете један или више различитих производа у апликацији, а највише 2000. У принципу, више података значи мање времена за откривање разлике између контролне групе и варијанте, ако постоји разлика. Експериментисањем са променом цена бројних производа можете да умањите могућност канибализације. |
| Минимални уочљиви ефекат (MDE) |
Унос који бирате при подешавању експеримента који означава ниво побољшања који желите да експеримент открије. Замислите то као одлуку о томе колико желите да експеримент буде осетљив, што утиче на процењено време до статистичког значаја. Када изаберете MDE, видећете процену времена које је потребно да би се утврдио статистички значајан резултат на основу пређашњих података које одаберете. На пример, мањи MDE значи осетљивији експеримент који доводи до дужег процењеног времена до израчунавања статистичке значајности. |
|
| Ефекат новитета | Феномен, помоћу кога корисници могу да изаберу или испробају нову функцију (на пример, нови производ или изабрану цену), чак и ако функција није боља нити привлачнија од оригинала. У том случају, пораст обично пролази са временом. | Експерименти који се брзо заврше могу да буду подложни ефекту новитета. Да бисте размотрили овај учинак, препоручујемо вам да користите процењени број недеља до израчунавања статистичког значаја. |
| Статистички значај | У овом A/B тестирању се одређује да ли је разлика између контролне групе и варијанте стварна или случајна. |
Ако интервал поверења не обухвата вредност „нула“ у учинку, сматрамо да се ради о статистички значајном резултату. У нашем случају, то је разлика између потрошње контролне групе и потрошње варијанте. Неке визуелне примере интервала поверења можете да прегледате у одељку Честа питања. |
| Варијанта | Варијација првобитне променљиве за тестирање за грану експеримента. | Варијанта је повећање цене или смањење цене за првобитну цену производа у апликацији. |
Подесите експеримент
Када подешавате експеримент, препоручујемо вам да у експеримент уврстите све заменљиве производе у апликацији, (попут валуте у игри), да бисте ограничили канибализацију.
Ако радите са малим количинама података, вероватно нећете имати довољно података за доношење закључка из експеримента. На пример, ако покрећете експеримент са новим производом, процењено трајање експеримента и упозорења можда неће бити тачни. У том случају можете да видите упозорење у Play конзоли да је у изабраном периоду предвиђена веома мала количина података. Ако добијете поруку о малој количини података, можда нећете имати довољно података за покретање експеримента или ћете можда моћи прецизно да подесите параметре експеримента. Ево неких предложених радњи за решавање проблема са малом количином података.
Насупрот томе, ако покрећете дужи експеримент, важно је да узмете у обзир да на резултате могу да утичу економски фактори, попут глобалних флуктуација валуте током времена.
1. део: Додајте детаље
Да бисте додали детаље експеримента, урадите следеће:
- Отворите Play конзолу и идите на страницу Експерименти са ценама (Остварите зараду помоћу Play-а > Експерименти са ценама).
- Кликните на Направи експеримент.
- У одељку Додајте детаље унесите назив експеримента и кратак опис експеримента (опционално).
- Напомена: Корисници не виде назив експеримента и кратак опис.
- Изаберите земље или регионе у којима желите да се експеримент спроводи.
- Важно: Експерименти са ценама се примењују само у изабраној земљи или региону, а не на повезаним локацијама. На пример, ако изаберете Француску, експерименти са ценама ће се примењивати само у Француској, а не и на повезаним територијама, као што је Француска Гвајана.
- Помоћу падајућег менија Производи одаберите производе у апликацији који желите да буду у експерименту. У падајућем менију су наведени доступни називи производа у апликацији, ИД-ови и цена.
- Важно: Ако одаберете производ у апликацији који је повезан са шаблоном за цене, онда ће шаблон за цене бити закључан током трајања експеримента са ценама.
- Изаберите датум почетка. Експеримент почиње у 00:00 PT на изабрани датум. Можете да закажете покретање експеримента у будућности.
- Кликните на Даље да бисте наставили са подешавањем експеримента додавањем варијанти.
На основу уноса подешавања експеримента, ако предвидимо да ће количина података бити премала да би се постигао статистички значај, видећете упозорење. У том случају вам препоручујемо да обавите прилагођавања да бисте обезбедили прикупљање довољне количине података да бисте достигли статистички значај. Да бисте видели могуће следеће кораке, погледајте чланак Препоручене радње за мале количине података.
Препоручене радње за мале количине податакаСледеће препоруке ће вам помоћи да промените количину података потребну за постизање статистичког значаја како би се трајање експеримента скратило.
|
Корак за подешавање експеримента |
Препоручена радња |
|---|---|
| 1. део: Додајте детаље | Повећајте број земаља или региона у експерименту. |
| 1. део: Додајте детаље | Тестирајте све производе у апликацији или повећајте број производа у апликацији. |
| 2. део: Додајте варијанте | Смањите број варијанти са две на једну. |
| 2. део: Додајте варијанте |
Експериментишите са смањењем цене за већи проценат (нижа цена). Напомена: То неће утицати на почетну процену, али ће помоћи током експеримента уживо. |
| 3. део: Управљајте подешавањима | Повећајте величину публике по варијанти (на пример, 50% контролна група и 50% експеримент). |
| 3. део: Управљајте подешавањима |
Повећајте минимални уочљиви ефекат. Напомена: То утиче само на експерименте у којима су варијанте и контролна група имале исти учинак. |
| 3. део: Управљајте подешавањима | Смањите ниво поузданости. |
2. део: Додајте варијанте
У одељку Додајте варијанте можете да додајете и уклањате варијанте цена. Експеримент са ценама мора да има бар једну варијанту. Да бисте додали варијанте:
- У падајућем менију одаберите Повећај цену или Смањи цену и унесите проценат који желите да примените на свој избор. Напомена:
- Морате да унесете цео број.
- Ако изаберете Снизи цену, морате да унесете вредност између 1 и 99.
- Ако изаберете Повећај цену, морате да унесете вредност између 1 и 999.
- Када додате варијанту, опсег контролне цене и опсег цена варијанте су наведени на страници. Можете да кликнете на Прикажи цене производа да бисте сазнали више, укључујући називе и ИД-ове производа у апликацији, замене за локацију (ако је примењиво) и информације о порезу. Овде можете да видите стварне промене цене изражене у процентима после примене курса и шаблона за одређивање цена за одређене земље.
- Кликните на + Додај још једну варијанту и поновите претходне кораке ако желите да уврстите више варијанти у експеримент. На страници су наведени и опсег контролне цене и опсег цена варијанте.
- Кликните на Даље да бисте наставили подешавање експеримента тако што ћете прецизирати подешавања експеримента.
3. део: Управљајте подешавањима
У одељку Управљајте подешавањима можете да подесите параметре циљања да бисте прецизније подесили експеримент. Да бисте управљали подешавањима експеримента:
- Унесите публику експеримента. Ово је проценат корисника у експерименту. Ови корисници ће се подједнако расподелити између варијанти и контролне групе. Имајте на уму да ће корисници ван експеримента видети и оригиналну (контролну) цену, али неће бити обухваћени анализом експеримента.
- Напомена: Морате да унесете цео број између 1 и 100.
- Унесите ниво поузданости. Смањење нивоа поузданости ће повећати вероватноћу лажног позитивног резултата, али и смањити време извршавања експеримента.
- Унесите минимални уочљиви ефекат. То означава ниво побољшања који желите да експеримент открије. Замислите то као одлуку о томе колико желите да експеримент буде осетљив. Тиме ћете прилагодити процењено време до израчунавања статистичког значаја.
- Прецизирајте параметре циљања да бисте прецизније подесили експеримент. Процењено време до израчунавања статистичког значаја можете да видите као смерницу на основу подешавања.
4. део: Покрените експеримент
Сада сте спремни да покренете експеримент. Током експеримента ће се променити цене за изабране производе у апликацији и земље или регионе. У сваком тренутку можете да зауставите експеримент.
- Пре него што покренете експеримент, потврдите да разумете следеће:
- Експеримент може да утиче на приход апликације. Имајте у виду да без статистички значајног резултата ниједан негативан или позитиван резултат прихода можда неће бити значајан, па вам препоручујемо да сачекате да остварите статистички значај.
- Док је експеримент активан, нећете моћи да мењате цене за изабране производе у апликацији.
- Примена резултата експеримента ће утицати на све уврштене земље или регионе и производе у апликацији.
- Кликните на Потврди и покрени.
Опционално: Прекините експеримент
У сваком тренутку можете да зауставите експеримент.
- Отворите Play конзолу и идите на страницу Експерименти са ценама (Остварите зараду помоћу Play-а > Експерименти са ценама).
- Отворите експеримент који желите да прекинете.
- Кликните на Прекини експеримент.
Када прекинете експеримент, цене експеримента ће се вратити на првобитну цену за релевантне земље или регионе и производе у апликацији. Експеримент и анализа више неће бити активни.
Ако сте заказали будући експеримент, можете и да га откажете ако пратите претходне кораке. Експерименти који су отказани у року од 24 сата од заказаног датума почетка ће повремено бити привремено активни.
Прегледајте резултате експеримента и примените варијанте
Важно је да сте упознати са различитим могућим исходима експеримената и њиховим значењем за апликацију и њену стратегију одређивања цена. Пажљиво прочитајте овај одељак пре него што примените резултате.
Прегледајте и анализирајте резултате експеримента
Када се резултати сматрају статистички значајним, биће доступни на страници за анализу експеримента и бићете обавештени путем поруке у пријемном сандучету.
Прегледајте резултат
Посетите експеримент да бисте видели резултат и анализу. Идите на страницу Експерименти са ценама (Остварите зараду помоћу Play-а > Експерименти са ценама) и кликните на стрелицу надесно поред експеримента да бисте прегледали страницу са анализом експеримента.
Исход се приказује у врху странице. Проширите одељак Могући исходи експеримената да бисте видели различите исходе и њихова значења. Испод исхода експеримента можете да видите кратак опис који објашњава резултат. На пример, можете да видите „Варијанта [X] је имала најбољи учинак“ изнад кратког објашњења резултата експеримента, што, на пример, може да гласи: „Варијанта [X] је остварила највећи приход“. У случајевима када се варијанта подудара са контролном групом или има боље резултате од ње, можете да кликнете на Примени варијанту [X] да бисте применили варијанту и ажурирали цене производа у апликацији у складу са тим. Сазнајте више у чланку Примените варијанте.
Напомена: Експерименти се аутоматски завршавају 14 дана после одређивања резултата или можете да кликнете на Прекини експеримент да бисте га одмах прекинули.
Прегледајте пропратне податке
Испод исхода, у табели се приказују подаци на којима се заснива статистички резултат. У овој табели су наведене варијанте, приход, приход у односу на контролну групу (и приход у односу на контролну групу у процентима) и интервал поверења за варијанте. Ако желите да разумете различите показатеље на страници са анализом експеримента, проширите одељак Дефиниције показатеља.
Испод табеле, у одељку Пропратни подаци можете да видите детаљније податке. Графикон подразумевано приказује податке о приходу у односу на податке о контролној групи до последњег доступног датума. Осенчена област у овом приказу представља интервал поверења. Графикон вам омогућава да видите како се интервал поверења мењао током времена. Помоћу филтера трајања и датума можете да прилагодите изабрано трајање и датуме у горњем десном углу графикона.
Помоћу филтера показатеља у горњем левом углу графикона можете да прегледате и следеће показатеље: Приход, Поруџбине, Купци, Стопа активних купаца, ARRPU (ови показатељи су описани и у одељку Дефиниције показатеља). Ако одаберете други показатељ, графикон не приказује интервал поверења јер је заснован на приходу.
Да бисте видели више детаља на нивоу производа, можете и да извезете резултате експеримента као CSV фајл. Поља, формат и примере за извоз CSV фајла можете да видите тако што ћете проширити одељак Дефиниције показатеља (извоз CSV фајла).
Примените варијанте
Пре него што примените варијанту, имајте у виду следеће:
- Ако су један или више производа у апликацији повезани са шаблоном за цене, применом цена ћете ажурирати цене за земљу или регион експеримента и опозвати везу ових производа у апликацији са шаблонима.
- Варијанту можете да примените само на све производе у апликацији и земље или регионе у експерименту. Статистички значај израчунавамо током целог подешавања и зато не можемо да гарантујемо исти исход и ефекат ако сте применили само део подешених земаља или региона и производа у апликацији.
Ако се варијанте подударају са контролном групом или су је надмашиле, цене можете да ажурирате применом варијанте:
- Отворите Play конзолу и идите на страницу Експерименти са ценама (Остварите зараду помоћу Play-а> Експерименти са ценама).
- Кликните на Примени варијанту поред варијанте коју желите да примените.
Цене апликације ће се ажурирати онако како сте је конфигурисали у варијанти. Експеримент се аутоматски завршава 14 дана после одређивања резултата, а можете и да кликнете на Прекини експеримент да бисте га одмах прекинули.
Могући исходи експериментаПостоји више могућих исхода експеримента. Исход експеримента одређује ваше следеће кораке.
| Исход експеримента | Значење | Напомене или препоруке |
|---|---|---|
| Варијанта [X] има најбољи учинак | Варијанта [X] је постала статистички значајна остваривањем смисленог резултата са највећим повећањем прихода. | Примените варијанту [X] јер има значајно бољи учинак од контролне групе и других варијанти. |
| Обе варијанте су имале бољи учинак од контролне групе | Обе варијанте су оствариле већи приход од контролне групе. Прегледајте резултате и одлучите коју варијанту желите да примените. | Ви одлучујете коју варијанту желите да примените. |
| Варијанте и контролна група су имале исти учинак | Ниједна варијанта није остварила већи приход од контролне групе. | Експеримент је прикупио довољно података и изједначио варијанте и контролну групу. |
| Контролна група је имала најбољи учинак | Контролна група је остварила већи приход од обе варијанте. | То указује на то да су актуелне граничне цене за земље и производ експеримента већ оптимизоване. Наставите да користите контролну групу за производе и земље из експеримента. |
| Потребно је још података | Експеримент је у току. Потребно је више података да би се утврдио статистички значајан резултат. | Погледајте препоручене радње за мале количине података да бисте одредили следеће кораке. |
| Без закључка | Експеримент је прерано заустављен или је достигао максимално трајање експеримента од шест месеци. Потребно је више података да би се утврдио статистички значајан исход. Пробајте да покренете нови експеримент са другачијим подешавањем. | Погледајте препоручене радње за мале количине података да бисте одредили следеће кораке. То може да значи да су купци равнодушни према ценама производа у апликацији у земљама или регионима експеримента. |
У овој табели су наведени показатељи са странице анализе експеримента.
| Показатељ | Дефиниција |
|---|---|
| Приход од свих производа | Бруто приход од корисника из експеримента који су купили производе у апликацији у експерименту и ван њега током одређеног периода. |
| Просечни приход по кориснику који плаћа (ARPPU) | Укупан бруто приход од производа у апликацији подељен бројем јединствених купаца (корисника који обаве бар једну куповину производа у апликацији у експерименту и ван њега) у наведеном периоду за експеримент. Овај показатељ ће вам помоћи да разумете вредност купаца за предузеће. |
| Стопа активних купаца (за 28 дана) |
Проценат активних корисника месечно који су обавили бар једну куповину производа у апликацији током експеримента, укључујући производе у апликацији изван експеримента. Напомена: Ово је кључни показатељ за разумевање конверзије купаца и повећање обима базе корисника који плаћају. |
| Купци | Јединствени корисници који купе бар један производ у апликацији по експерименталној цени током наведеног периода. |
| Приход од нових корисника који су инсталирали апликацију | Бруто приход од корисника који су инсталирали апликацију први пут на било ком уређају после датума почетка експеримента и видели експерименталну цену први пут. Имајте у виду да неки корисници онемогућавају дељење ових података са Google-ом. |
| Поруџбине | Број куповина експерименталних производа у апликацији обављених током експеримента у одређеном периоду. |
| Приход | Бруто приход корисника експеримента који су купили производе у апликацији у експерименту током одређеног периода. |
Ова табела садржи поља, формат и примере за дефиниције показатеља извезених као CSV фајл.
|
Поље |
Формат | Примери и напомене |
|---|---|---|
| Датум | Стринг |
Датум поруџбина заснован на пацифичком времену (у формату ДД. МММ. ГГГГ). |
| ИД шифре артикла | Стринг |
Јединствени ИД производа у апликацији који наводи програмер. |
| Назив производа | Стринг |
Назив производа у апликацији који наводи програмер. |
| Земља | Стринг |
Јединствени кôд земље за релевантне показатеље производа у апликацији. |
| Грана експеримента | Стринг |
Грана експеримента за релевантне показатеље производа у апликацији. |
| Валута програмера |
Стринг |
Валута у коју су конвертоване поруџбине. Ово је локална валута уплата које примате. |
| Приход | Нумерички |
Укупан бруто приход за наведени производ у апликацији, (имајући у виду датум, земљу и грану експеримента). |
| Приход од нових корисника који су инсталирали апликацију | Нумерички |
Бруто приход од корисника који су инсталирали апликацију први пут на било ком уређају после датума почетка експеримента и видели цену први пут (имајући у виду наведени производ у апликацији, датум, земљу и грану експеримента). Имајте у виду да неки корисници онемогућавају дељење ових података са Google-ом. |
| Поруџбине | Нумерички |
Укупан број поруџбина за наведени производ у апликацији (имајући у виду датум, земљу и грану експеримента). |
| Купци | Нумерички |
Укупан број купаца за наведени производ (имајући у виду датум, земљу и грану експеримента). Купци су корисници који су купили одређени производ у апликацији током експеримента. |
Честа питања
У којим земљама или регионима могу да покрећем експерименте?Земље или региони испуњавају услове за експерименте са ценама само ако испуњавају следеће критеријуме:
- земље или региони у којима сте већ представили верзију (укључујући верзије за интерно тестирање).
- земље или региони који подржавају локалну валуту.
Ако је количина података веома мала, нема доступних података. Осим тога, неки подаци приказани на страници са анализом експеримента могу да касне до седам дана.
Да. Ако покренете експеримент са производом у апликацији повезаним са шаблоном за цене, имајте на уму да ће се цене у експерименталној земљи или региону закључати током трајања експеримента. Међутим, и даље можете да промените цене за друге земље или регионе.
Ако одлучите да примените нове цене на крају експеримента, опозваћете везу свих експерименталних производа у апликацији са повезаним шаблонима за цене, а шаблон за цене ће остати непромењен. Ако желите да примените резултате експеримента без опозивања везе производа у апликацији са шаблонима за цене, идите право на страницу Шаблони за цене (Подешавање > Шаблони за цене) и ажурирајте цене тамо.
Сазнајте више у чланку Шаблони за цене.
Не, експерименталне цене могу да се тестирају само у оквиру минималног и максималног опсега цена који је дефинисан по земљи или региону. Када унесете промену цене током подешавања експеримента, ако је та промена цене на било којој граничној вредности, аутоматски се преузима минимална или максимална цена. Да бисте прегледали листу опсега цена и валута дозвољених по земљама, погледајте Подржане локације за дистрибуцију корисницима Google Play-а.
Не; експеримент са ценама можете да покрећете ако сте интегрисали било коју верзију Google Play система обрачуна.
Све поруџбине експеримента су видљиве у месечним финансијским извештајима који могу да се преузму (извештај о процењеној продаји и извештај о заради). Можете да видите који су експериментални производи у апликацији купљени по контролној цени и цени варијанте за земље или регионе у којима сте покренули експеримент са ценама.
Препоручујемо вам да не покрећете истовремене А/Б експерименте како бисте били сигурни да ће резултати имати смисла. На пример, Firebase ради независно од експеримената са ценама у Play конзоли, а било какве сметње са одређеним производима у апликацији могу да утичу на поузданост резултата експеримента.
За израчунавање интервала поверења користимо џекнајф (статистичку алатку која омогућава процену варијације преко поновног узорковања), а затим примењујемо узастопно тестирање вероватноће комбинација да бисмо контролисали повећану лажно позитивну стопу од континуираног надзора. Статистички значај се одређује када се интервал поверења не укршта са нулом.
Да бисте користили експерименте са ценама, морате да имате дозволе за Управљање присуством у продавници и Преглед финансијских података.
Експеримент се аутоматски прекида 14 дана после остварења статистичког значаја или по истеку максималне дужине експеримента од шест месеци. Експеримент не прекидамо током процењеног трајања одређеног током подешавања експеримента; прекидамо га када откријемо статистички значајну разлику, уз рок од 14 дана за примену нове цене пре него што се цене врате на првобитне.
Не, то није могуће. Корисник види само једну цену током трајања експеримента.
Не, то није могуће јер је експеримент већ почео да прикупља резултате са параметрима које сте првобитно изабрали. Можете да покренете други експеримент паралелно са изабраним додатним земљама или регионима, односно да прекинете актуелни експеримент и подесите нови. Ако се производи у апликацији и земље или региони преклапају, имајте у виду да ћете морати да сачекате 30 дана пре подешавања новог експеримента.
Статистички значај се израчунава у свим земљама или регионима у комбинацији са експерименталним производима, за разлику од појединачних прорачуна за сваку комбинацију. Ако вас интересује прилагођавање цене у одређеној земљи или региону, препоручујемо да изаберете само ту земљу или регион у подешавању експеримента.
Да, варијанту можете да примените чак и када се цене врате на првобитне.
Ако производи у апликацији из експеримента не генеришу приход који је значајно другачији од контролне групе или нема довољно података, сматра се да резултати нису јасни. Овај резултат показује да је могуће да су купци равнодушни према те две цене.
У принципу, већи узорак има већу снагу. Ако је један производ у апликацији који планирате да тестирате један од најпопуларнијих производа код многих купаца, онда тестирање тог производа у апликацији може да буде корисно. У супротном, препоручујемо вам да тестирате више производа у апликацији да бисте повећали снагу експеримента.
Ако имате више производа у апликацији који су донекле заменљиви (на пример, 0,99 USD за 60 јединица валуте у апликацији и 4,99 USD за 300 јединица валуте у апликацији), препоручујемо вам да тестирате оба производа у апликацији да бисте избегли канибализацију.
У принципу препоручујемо експерименте са једном варијантом, при чему су производи у апликацији са првобитном ценом контролна група, а производи у апликацији са попустом варијанта. Експеримент са две варијанте има производе у апликацији са првобитном ценом као контролну групу и исте производе у апликацији по две различите изабране цене. Резултати таквих експеримената могу да буду компликовани за тумачење, а за експерименте са две варијанте потребно је више времена да достигну статистички значај него експерименти са једном варијантом.
Ако интервал поверења не обухвата вредност „нула“ у учинку, сматрамо да се ради о статистички значајном резултату. У нашем случају, то је разлика између потрошње контролне групе и потрошње варијанте.
Ево примера како интервал поверења може да изгледа са коначним позитивним резултатом:
Ево примера како интервал поверења може да изгледа са коначним негативним резултатом:
Ево примера како интервал поверења може да изгледа са нејасним резултатом који тражи више података:
Да, стално надгледамо лажирање локација корисника и предузимамо мере да бисмо ублажили утицај на наше програмере и њихове производе.
Сродни садржај
- Сазнајте више о експериментима са ценама и сродним функцијама.
- Завршите курс за експерименте са ценама у Google Play академији.