Tinatalakay sa artikulong ito ang pinakamahuhusay na kagawian para sa mga eksperimento sa Uplift ng App.
Sa page na ito
- Bago gumawa ng bagong eksperimento
- Setup ng eksperimento
- Habang tumatakbo ang eksperimento
- Kapag tapos na ang eksperimento
Bago gumawa ng bagong eksperimento
Unawain kung paano nalulutas ng Eksperimento sa Uplift ng App ang iyong mga sitwasyon ng paggamit
Ano ang Eksperimento sa Uplift ng App? Nagbibigay-daan sa iyo ang Mga Eksperimento sa Uplift ng App na pag-eksperimentuhan at unawain ang pagtaas sa performance na dulot ng pagdaragdag ng mga asset na video sa kasalukuyan mong campaign.
-
Inirerekomenda namin ang mga sumusunod na diskarte sa paggamit ng Eksperimento sa Uplift ng App batay sa iyong mga sitwasyon ng paggamit:
- Subukan ang Video sa unang pagkakataon: Kung wala kang video sa iyong campaign sa kasalukuyan, matutulungan ka ng Eksperimento sa Uplift ng App na unawain ang pagtaas sa performance kapag nagdagdag ng asset na video
- Piliin ang panalo sa maraming asset na Video na may mga directional na resulta: Kung marami kang asset na Video, matutulungan ka ng Eksperimento sa Uplift ng App na maunawaan:
- Kung ang lahat ng asset na Video ay sama-samang nakakatulong sa iyo na pahusayin ang performance
- Paano nag-aambag ang bawat asset na Video sa pangkalahatang pagtaas ng performance sa directional na paraan
Minimum na badyet at bid
Inirerekomenda namin ang isang badyet at bid na nagbibigay-daan sa campaign na makakuha ng kahit man lang 100 (maganda kung 150+) conversion bawat araw para tiyaking mao-optimize ng aming mga modelo ang iyong mga campaign. Tinutulungan ka ng mga Smart Bidding simulator na mas maunawaan kung gaano karaming conversion ang malamang na makuha mo kapag binago mo ang iyong badyet at target ng strategy sa pag-bid.
- Kapag mas marami ang pang-araw-araw na dami ng mga conversion sa eksperimento, mas mabilis na maaabot ng eksperimento ang mga statistically significant na resulta.
- Kung maraming kasalukuyang asset na video ang iyong batayang campaign (> ~50), malamang na mas mataas ang badyet na kinakailangan para araw-araw na masuri ang bawat asset.
Target ng strategy sa pag-bid ng campaign (tCPI / tCPE / tROAS)
Kung nalilimitahan ng badyet ang iyong campaign, tiyaking ang aktwal mong CPI o CPE ay hindi mas mababa nang higit sa 2 beses kaysa sa target mong CPI o CPE (at gayundin para sa tROAS). Makakatulong itong tiyaking hindi kami makakaranas ng hindi inaasahang gawi sa pag-cold start / pagbabawas ng bid.
Sa pangkalahatan, mas mabilis na maaabot ng mga campaign na hindi nalilimitahan ng badyet o mga bid ang mga mas tumpak na resulta.
Suriin ang mga kasalukuyang asset na video
Kung nalilimitahan ng badyet ang campaign
- Kung ang kasalukuyan mong campaign ay walang anumang video o may mga video pero hindi gumagastos, malamang na walang maihatid na pagtaas sa performance ang pagsubok sa pagdaragdag ng mga bagong video.
- Isaalang-alang ang pagtataas ng badyet ng campaign hanggang sa hindi na ito malimitahan at pagkatapos ay suriin ang pangangailangan para sa eksperimento sa uplift.
Kung nalilimitahan ng badyet ang campaign
- Kung ang kasalukuyan mong campaign ay may mga asset na video pero gumagamit lang ang mga ito ng maliit na porsyento ng kabuuang paggastos ng campaign, malamang na hindi maghatid ng uplift sa performance ang pagsubok sa pagdaragdag ng mga bagong asset na video.
- Isaalang-alang ang pagtataas ng iyong target na cost per conversion (o pagbabawas ng tROAS mo) hanggang sa maabot ng iyong mga kasalukuyang asset na video ang isang makabuluhang halaga ng paggastos pagkatapos ay suriin ang pangangailangan para sa isang eksperimento sa uplift.
Setup ng eksperimento
Mga layunin ng eksperimento
- Paboran ang pagpili ng mga sukatan ng eksperimento na naaayon sa iyong mga layunin sa pag-optimize ng campaign.
- Halimbawa, piliin ang Dami ng Pag-install o CPI kung nag-o-optimize ang iyong campaign para sa mga pag-install.
- Paboran ang Cost per action (pag-install / in-app na pagkilos) kaysa sa mga sukatan sa damit ng conversion maliban kung hindi nalilimitahan ng badyet ang iyong campaign.
Hating pang-eksperimento
- Inirerekomenda naming gumamit ng 50/50 na hati sa trapiko at badyet sa karamihan ng mga sitwasyon para maabot ang pinakamabibilis na resulta ng eksperimento na posible sa pinakamababang gastos.
- Sa ilang partikular na sitwasyon, halimbawa, sa palagay mo ay magdudulot ng malaking negatibong epekto ang mga asset na sinusubukan mo, baka mainam na gumamit ng ibang hati ng trapiko (halimbawa, 40% sa trial campaign, 60% sa batayang campaign)
Level ng kumpyansa
- Inirerekomenda naming gumamit ng 80% level ng kumpyansa na, sa pangkalahatan, ay nagdudulot ng mahusay na katumpakan sa mga resulta ng eksperimento na mas maikli ang tagal at mas mababa ang gastos sa 85% o 95% level ng kumpyansa.
- Kung hindi ka sigurado sa gustong level ng kumpyansang pipiliin para sa iyong eksperimento, puwede mong gamitin ang talahanayan sa appendix para hanapin ang dami ng mga conversion na kakailanganin mo para maabot ang isang partikular na level ng kumpyansa.
Mga petsa ng eksperimento
- Inirerekomenda naming magpatakbo ng mga eksperimento sa loob ng 30 araw kung posible para ma-maximize ang posibilidad para sa mga siguradong resulta ng eksperimento
Pagsusuri sa Kalagayan ng Eksperimento
- Ang Pagsusuri sa Kalagayan ay naghahatid ng isang serye ng mga diagnostic at pagsusuri para pataasin ang probabilidad ng mga siguradong resulta ng eksperimento. Inirerekomenda naming ayusin mo ang malulubhang isyu (kulay pula) tulad ng paggamit ng iOS app (kasalukuyang hindi sinusuportahan) at subukang ayusin ang mga katamtamang isyu sa pamamagitan ng pinakamahusay na pagsisikap (kulay dilaw) tulad ng mga limitasyon sa badyet. Matuto pa Tungkol sa Pagsusuri sa Kalagayan ng paggawa ng eksperimento sa Uplift ng App.
Mga pangkalahatang rekomendasyon
Mga interaction sa ibang campaign na nagpo-promote ng parehong app
- Tiyaking walang ibang campaign ang account na nagpo-promote ng parehong app sa parehong mga geolocation gaya ng campaign na sinusubukan para maiwasan ang pag-cannibalize ng campaign.
Mga paglabag sa patakaran
- Ayusin ang mga magiging paglabag sa patakaran na baka mayroon ka sa iyong campaign (kapag posible) dahil mapipigilan ng mga ito ang isa sa mga campaign sa iyong eksperimento na tumakbo o puwede nitong maantala ang mga resulta.
Habang tumatakbo ang eksperimento
Mga pagbabago sa target na badyet at performance
- Inirerekomenda naming huwag i-update ang mga setting na ito sa unang 7 araw ng eksperimento.
- Kung kinakailangan ng mga pagbabago pagkatapos ng panahong iyon, piliin ang maliliit at pang-araw-araw na dagdag na pagbabago kaysa sa isang malaking pagbabago.
Mga pagbabago sa asset
- Kung kailangan mong gumawa ng pagbabago sa isang asset sa iyong batayang campaign, tiyaking ganoon din ang gagawin mo sa nauugnay na treatment campaign sa parehong panahon.
Pagsubaybay sa mga eksperimento
- Inirerekomenda naming ibukod ang unang 5 hanggang 10 araw ng eksperimento sa mga resulta (gamit ang selector ng petsa) para maiwasang maimpluwensyahan ng learning period ng campaign ang mga sukatan.
- May opsyon kang subaybayan ang mga resulta ng campaign gamit ang 3 level ng kumpyansa (80%, 85%, 95%).
- Kung nagdagdag ka ng maraming asset na video sa trial campaign, matitingnan mo ang performance ng isang indibidwal na asset na video sa pag-uulat ng Google Ads.
Kapag natapos ang eksperimento
Pagbibigay-kahulugan sa mga resulta ng eksperimento
- Mga statistically significant na resulta
- Mga positibong resulta sa parehong layunin sa eksperimento: Inirerekomenda naming i-promote mo ang asset sa iyong batayang campaign at potensyal sa ibang campaign sa account mo kung saan naaangkop (halimbawa, mga campaign na may mga katulad na layunin pero sa ibang geo) para pahusayin ang iyong pangkalahatang performance.
- Mga negatibong resulta sa parehong layunin sa eksperimento: Inirerekomenda naming huwag mong i-promote ang asset sa iyong campaign o account.
- Magkahalong positibo at negatibong mga resulta sa mga layunin sa eksperimento: Inirerekomenda naming gumawa ka ng mga desisyon batay sa mga pangangailangan ng negosyo mo at paghihigpit sa ROI. Halimbawa, kung tataas ang CPI nang 5%, tataas ang mga pag-install nang 10%, dapat i-promote ng mga advertiser ang mga asset kung kumportable sila sa higit pang pag-install sa ilang pagtaas sa average na CPI.
- Mga hindi statistically significant na resulta
- Inirerekomenda naming gumawa ka ng mga desisyon batay sa mga pangangailangan ng negosyo mo at sa iyong risk tolerance (kung gaano kalaking kawalan ang makakaya mo). Halimbawa, para sa mga advertiser na kumportable sa mga directional na resulta, makatuwiran ang pag-promote ng mga asset na may positibo pero hindi statistically significant na resulta. Bukod dito, inirerekomenda naming gumawa ng mga pagbabago sa asset at magsagawa ng ibang eksperimento.
