Tungkol sa katiyakan sa lift

Ang katiyakan sa lift, na available lang para sa Brand Lift, ay isang mahalagang sukatan para maunawaan ang pagkamaaasahan ng iyong mga resulta ng lift. Kinakatawan nito ang posibilidad na nabuo ng iyong mga campaign ang nasukat na lift at hindi ito dahil sa pagkakataon.

Sa page na ito

Paano ito gumagana

Kinakalkula ang katiyakan sa lift bilang 1 - p-value at kung minsan, puwede itong tukuyin bilang “statistical significance” o “confidence” ng mga resulta ng lift. Ipinapakita ng p-value kung gaano kalaki ang posibilidad ng iyong mga resulta ng lift kung talagang hindi epektibo ang mga ad. Ang mataas na katiyakan, na katumbas ng mababang p-value, ay nagsasaad na malabong nangyari ang mga resulta dahil lang sa pagkakataon. Mahusay na tagasaad ang mataas na katiyakan na nakabuo ng lift ang mga ad mo.


Maunawaan ang mga level ng katiyakan ng Brand Lift

Sinusubukan ng Google na mangolekta ng sapat na mga sagot para ma-detect ang lift na may pinakamataas na katiyakan (90%), pero puwede pa ring makatulong ang mga resultang may mas mababang katiyakan sa pagpapasya kaugnay ng pag-advertise. Sa iyong Google Ads account, makikita mo ang mga resulta ng lift at ang nauugnay na katiyakan ng mga ito para sa lahat ng pag-aaral na may katiyakan sa pagsukat na lampas 70%. Hindi iniuulat ang mga resultang mas mababa sa 70% dahil hindi magiging sapat ang tibay ng mga ito ayon sa istatistika para maging kapaki-pakinabang at mapagkakatiwalaan ang mga ito.

Tandaan: Hindi available ang katiyakan sa lift para sa lahat ng account. Kung wala ito sa iyong account, mga resulta lang na may mataas na katiyakan (>90%) ang makikita mo. Available lang ang katiyakan sa lift para sa Brand Lift. Ibinabahagi lang ang mga resulta ng Search at Conversion lift nang may pinakamataas na katiyakan sa lift (>90%).


Paano bigyang-kahulugan at gamitin ang mga resulta sa katiyakan sa lift

Ang sumusunod na talahanayan ay nagbibigay ng pangkalahatang gabay kung paano bigyang-kahulugan ang mga resulta ng lift na may ibang katiyakan sa lift. Tandaan na nira-round down ang katiyakan sa lift ayon sa mga increment na 5% para mapasimple ito. Puwede mong gamitin ang talahanayan sa ibaba bilang gabay, pero inirerekomendang bigyan mo ng kahulugan ang mga resulta batay sa mga pangangailangan ng iyong negosyo at sa risk tolerance mo.

Katiyakan sa lift Pakahulugan
≥90% Mataas na confidence - Ang mga resultang ito ang pinakamaaasahan dahil malabong dahil sa pagkakataon ang mga ito. Puwede mong gamitin ang mga resultang may mataas na confidence para magpasya kaugnay ng iyong mga ad dahil may matibay na ebidensya na gumawa ng lift ang mga ad mo.
85% Katamtamang confidence - May maliit na tsansa na naapektuhan ng noise ang mga resultang ito. Inirerekomendang gamitin ang mga ito bilang mga directional insight o para sa mga pagpapasyang may mababang panganib.
80%
75% Mababang confidence - Posibleng dahil sa pagkakataon ang mga resultang ito at posibleng hindi tumpak na ipinapakita ng mga ito ang performance ng mga ad mo. Inirerekomendang gumamit ng mga resultang may mababang confidence para sa mga directional insight o mga pagpapasyang may napakababang panganib. Puwede kang makakuha ng higit pang resulta ng survey (sa pamamagitan ng remeasurement) para mapataas ang katiyakan bago ka gumawa ng malalaking desisyon.
70%
“Walang lift” Mga hindi maaasahang resulta - Ang mga resultang may katiyakang mas mababa sa 70% ay hindi nagbibigay ng sapat na ebidensya ng lift at iniuulat bilang "walang lift" sa Google Ads.

Mahalagang tandaan na layunin ng Brand Lift na ma-detect ang lift sa pinakamataas na katiyakan na 90%. Hindi mababawasan ang kalidad ng mga resulta kung magpapakita ng mga resultang may mas mababang katiyakan, pero makakakuha ka ng mga data point na hindi sana available.

Maunawaan ang mababang katiyakan

Hindi laging nangangahulugan ang mga resultang may mababang katiyakan na hindi epektibo ang mga ad. Makakatulong sa iyo ang mga resultang ito na makakuha ng mga insight na dapat pang i-verify. Ang ibig sabihin ng mababang katiyakan sa lift ay hindi na-detect ng resolusyon sa pagsukat ang lift nang may mataas na confidence. Puwede itong mangyari dahil hindi sapat ang mga sagot sa survey na nakolekta o dahil mababa ang lift. 

  • Mabababang bilang ng survey: Humahantong ang mabababang bilang ng survey (wala pang 4100 sagot) sa mas mahinang pagsukat, na nangangahulugan na mas malamang na magkaroon ng mas mababang katiyakan sa lift. Sa partikular, magkakaroon ka ng mas mababang bilang ng survey sa bawat segment kapag sine-segment mo ang iyong mga resulta, halimbawa, ayon sa edad, kasarian, o mga campaign. Puwede kang gumamit ng remeasurement para maparami ang mga sagot sa survey
  • Mababang absolute lift: Kapag wala pang 2% ang lift, mahirap mag-detect nang may mataas na katiyakan. Gayunpaman, hindi naman talaga tagasaad ng mahinang performance ang magbabang absolute lift. Puwede pa ring makalamang sa performance ang mga campaign na may mababang absolute lift pagdating sa gastos sa bawat na-lift na user (cost per lifted user o CPLU).

Paghambingin ang mga lift sa level ng segment nang may ibang katiyakan sa lift

Malamang na magkakaroon ng ibang katiyakan sa lift ang iba't ibang segment, halimbawa ay iba't ibang grupo ng edad. Gaya ng ipinaliwanag sa itaas, hindi mo dapat isipin na ang segment na may pinakamataas na katiyakan sa lift ay ang segment na may pinakamahusay na performance. 

Una, tandaan na inirerekomendang gamitin ang absolute lift o CPLU para maghambing ng mga segment (huwag gamitin ang mga na-lift na user). Pangalawa, tandaan na kadalasan ay magkatulad ang performance sa lift ng iba't ibang segment (mataas ang pag-overlap ng mga confidence interval) kaya nagiging mahirap na matukoy nang malinaw ang pinakamahuhusay na segment. Gayunpaman, kung gusto mong i-optimize ang iyong campaign para sa mga segment na may pinakamahusay na performance, inirerekomendang piliin ang mga segment na may pinakamataas na absolute lift (o pinakamababang CPLU) para magawa ang pinakamahusay na desisyon sa average. Gayunpaman, tandaan na kapag mas mababa ang katiyakan sa lift, mas mataas ang tsansa na dahil sa noise ang nasukat na performance. Kung marami kang segment na may magkakatulad na performance, posibleng mainam na piliin ang mga segment na may pinakamataas na katiyakan para mabawasan ang panganib. Kung hindi ka sigurado kung paano tutukuyin ang mga segment na may pinakamahusay na performance, pakitanong sa kinatawan ng account mo.

Maunawaan ang mga confidence interval at level

Kapag tinutukoy ang lift ng isang ad, kadalasang tinutukoy ng mga tao ang “point estimate” ng lift na siyang pinakamalamang na lift na nabuo ng ad. Gayunpaman, sa Google Ads, makakahanap ka rin ng confidence interval para sa lahat ng sukatan ng brand lift na isang tinantyang saklaw kung saan posibleng mapabilang ang iyong resulta. Ang saklaw na ito ay tinutukoy ng isang upper at lower bound, na siyang pinakamatataas at pinakamabababang value kung nasaan malamang ang iyong lift. Gumagamit ang mga resulta ng lift ng mga 80% 2-sided na confidence interval, ibig sabihin, may 80% tsansa na nasa pagitan ng lower bound at upper bound ang totoong lift. Ibig sabihin din nito, mayroon kang 90% tsansa na ang lift ay mas mataas kaysa sa lower bound.

Halimbawa: Puwede mong makita na 35% ang iyong kaugnay na lift, na siyang point estimate. Gayunpaman, puwede mo ring makita na mula 30%, naging 40% ang confidence interval, ibig sabihin, may 80% tsansa na ang totoong lift ay nasa pagitan ng 30%, ang lower bound, at ng 40%, ang upper bound. Isa pang paraan para tingnan ito ay may 90% tsansa na mas mataas kaysa sa 30% (lower bound) ang lift.

Tandaan na kapag mas maliit sa 90% ang katiyakan sa lift, magiging mas maliit sa 0 ang lower bound ng confidence interval dahil hindi magagarantiyahan ng Google nang may lampas 90% katiyakan na positibo ang lift.


Mga madalas itanong

Puwede ba akong pumili ng sarili kong minimum na katiyakan sa lift? 

Hindi. Laging ipinapakita ang mga resulta kung lampas 70% ang katiyakan ng mga ito. Kung gusto mo ng mas mataas na limitasyon (gaya ng 80%), i-discard ang anumang resulta na hindi pasok sa iyong limitasyon. Hindi posibleng magtakda ng limitasyong mas mababa sa 70%.

Paano ko mapapataas ang katiyakan sa lift ko?

Nakadepende ang katiyakan sa lift sa katumpakan ng pagsukat. Para maging mas tumpak ang pagsukat, puwede kang:
  1. Gumamit ng remeasurement para madagdagan ang pangongolekta para sa survey. 
  2. Magsukat ng pagkakatanda sa ad o kaalaman para matukoy ang pinakamataas na tsansang makakuha ng lift na may mataas na katiyakan. 
  3. Makipag-usap sa account manager mo para pumili ng mga campaign ng ad na may mataas na lift.

Paano ako matututo pa tungkol sa kung paano kinakalkula ang katiyakan sa lift?

Laging may likas na pagka-random ang mga survey na puwedeng humantong sa mga pagbabago-bago sa data. Kadalasan ay tinutukoy ito bilang "random na noise sa pagsukat." Puwedeng humantong ang random noise na ito sa pagsukat ng brand lift nang positibo kahit na hindi totoong gumagawa ng lift ang mga ad. Sinusukat ng p-value kung gaano kalaki ang posibilidad na dahil sa noise ang nasukat na lift kung hindi nakabuo ng lift ang mga ad. Kung napakababa ng p-value mo, napakalabo na resulta ng random na noise ang nasukat na lift, at siguradong nagdulot ng lift ang mga campaign ng ad.
Kinakalkula ang katiyakan sa lift bilang “1-p-value” at inihahayag ito bilang porsyento. Kung mas mataas ang bilang na ito (at samakatuwid ay mas mababa ang p-value), mas siguradong nagdulot ng lift ang mga ad. 
Halimbawa 1: Nagpapakita ang ad ng 5% absolute lift, p-value = 0.01: Ibig sabihin nito, may 1% tsansa na makakita ng 5% lift dahil sa random na noise sa pagsukat. Humahantong ito sa mataas na katiyakan (99%) na nagdulot ng lift ang isang ad. 

 

Halimbawa 2: Nagpapakita ang ad ng 5% absolute lift, p-value = 0.35: Ibig sabihin nito, may 35% tsansa na makakita ng 5% lift dahil sa random na noise sa pagsukat. Humahantong ito sa mababang katiyakan (65%) at hindi ito maaasahang ebidensya na nagdulot ng lift ang ad.

Bakit ako makakaranas ng mababang katiyakan sa lift sa mga segment?

Kapag hinahati-hati ang data ayon sa segment, halimbawa, ayon sa mga campaign, may subset lang ng lahat ng survey ang bawat segment. Dahil mas kaunti ang mga survey ng mga indibidwal na segment kaysa sa pangkalahatang pag-aaral, inaasahan na magiging mas mahirap na i-detect ang lift nang may mataas na katiyakan. Tandaan na kung mas malawak ang abot ng isang segment kaysa sa isa pa, halimbawa, kung mas malaki ang badyet ng isang campaign kaysa sa isa pa, mas maraming survey ang makokolekta nito at mas malamang itong magkaroon ng mas mataas na katiyakan sa lift, kahit na posibleng mas maliit ang lift para sa segment na iyon. Pinakamahirap na ma-detect ang lift sa mga segment na may pinakamaliit na abot.

Saan ko makikita ang katiyakan para sa bawat segment?

Sa ulat sa lift, may nae-expand na talahanayan sa ibaba ng mga chart. Puwede mong suriin ang talahanayan para mahanap ang lahat ng iyong sukatan ng lift, kasama na ang katiyakan sa lift.

Saan ko makikita ang mga confidence interval?

Kasama ang mga confidence interval sa mga graph ng lift at makikita ang mga ito sa pamamagitan ng pag-hover sa mga resulta ng lift sa mga talahanayan. Gamit ang mga graph, masisiyasat mo kung gaano kalaki ang kawalan ng katiyakan sa pagsukat. Dagdag pa rito, kapag naghahambing ng mga segment, magbibigay-daan ito sa iyong mabilis na masiyasat kung nag-o-overlap ang mga confidence interval ng dalawang segment. Kung mas mataas ang overlap, mas hindi ka makakatiyak na mas mahusay ang isang segment kaysa sa isa pa. Sa lahat ng graph, hanggang 0 lang ang mga confidence interval pero makikita ang mga eksaktong value sa pamamagitan ng pag-hover sa mga resulta ng lift sa mga talahanayan.

Mga kaugnay na link

Nakatulong ba ito?

Paano namin mapapaganda ito?

Kailangan ng higit pang tulong?

Subukan ang mga susunod na hakbang na ito:

Search
I-clear ang paghahanap
Isara ang paghahanap
Pangunahing menu
6457128098871289552
true
Maghanap sa Help Center
true
true
true
true
true
73067
false
false
false