מידע על ודאות העלייה

המדד 'ודאות העלייה', שזמין רק למשתמשיפתרון Brand Lift של Google, הוא מדד חשוב להבנת המהימנות של תוצאות העלייה. הוא מייצג את הסבירות שהעלייה שנמדדה היא לא מקרית, אלא תוצאה של הקמפיינים.

הנושאים בדף:

איך זה עובד
הסבר על רמות הוודאות של Brand Lift
איך לפרש את ודאות העלייה
שאלות נפוצות

איך זה עובד

המדד 'ודאות העלייה' מחושב לפי הנוסחה ‎1 - p-value ואפשר לפעמים להתייחס אליו כאל 'מובהקות סטטיסטית' או 'ביטחון' בתוצאות העלייה. הערך p-value מצביע על רמת הסבירות של תוצאות העלייה במקרה שהמודעות לא יעילות. ודאות גבוהה, שתואמת לערך p-value נמוך, מצביעה על כך שסביר להניח שהתוצאות לא מקריות. ודאות גבוהה היא אינדיקציה חזקה לכך שהמודעות הניבו עלייה.

הסבר על רמות הוודאות של Brand Lift

‫Google מנסה לאסוף מספיק תשובות כדי לזהות עלייה ברמת הוודאות הגבוהה ביותר (90%), אבל תוצאות ברמת ודאות נמוכה יותר עדיין יכולות לעזור בקבלת החלטות לגבי פרסום. בחשבון Google Ads, תוכלו לראות את תוצאות העלייה ואת רמת הוודאות שמשויכת להן בכל המחקרים שבהם רמת הוודאות של המדידה גבוהה מ-70%. לא מתבצע דיווח על תוצאות ברמת ודאות שנמוכה מ-70% כי הן לא מספיק מועילות ומהימנות מבחינה סטטיסטית.

הערה: המדד 'ודאות העלייה' לא זמין בכל החשבונות. אם המדד הזה לא זמין בחשבון שלכם, תוכלו לראות רק תוצאות ברמת ודאות גבוהה (מעל 90%). המדד 'ודאות העלייה' זמין רק למשתמשי פתרון Brand Lift של Google. שיתוף התוצאות של עלייה בנפח החיפוש ובהמרות מתבצע רק אם רמת ודאות העלייה היא הגבוהה ביותר (מעל 90%).

איך לפרש תוצאות עם ודאות עלייה ולהשתמש בהן

הטבלה הבאה מספקת קווים מנחים לפירוש של תוצאות עלייה ברמת ודאות שונה. חשוב לזכור שרמת ודאות העלייה מעוגלת כלפי מטה במרווחים של 5% כדי לשמור על פשטות. אפשר להיעזר בטבלה הבאה לקבלת הכוונה, אבל מומלץ לפרש את התוצאות לפי הצרכים של העסק והמוכנות שלכם לקחת סיכונים.

ודאות העלייה	פירוש
‫90% ומעלה	רמת סמך גבוהה – התוצאות האלה הן האמינות ביותר כי לא סביר שהן מקריות. אתם יכולים להשתמש בתוצאות ברמת סמך גבוהה כדי לקבל החלטות שקשורות למודעות, כי יש הוכחות מוצקות לכך שהמודעות הניבו עלייה.
85%	רמת סמך בינונית – יש סיכוי קטן שהתוצאות האלה הושפעו מרעשי רקע. מומלץ להשתמש בהן כתובנות מנחות או לצורך קבלת החלטות ברמת סיכון נמוכה.
80%
75%	רמת סמך נמוכה – יכול להיות שהתוצאות האלה מקריות ולא משקפות במדויק את ביצועי המודעות. מומלץ להשתמש בתוצאות ברמת סמך נמוכה כתובנות מנחות או לצורך קבלת החלטות ברמת סיכון נמוכה מאוד. אפשר לאסוף יותר תשובות לסקר (באמצעות מדידה מחדש) כדי להגדיל את רמת הוודאות לפני קבלת החלטות משמעותיות.
70%
'לא זוהתה עלייה'	תוצאות לא אמינות – תוצאות ברמת ודאות שנמוכה מ-70% לא מספקות מספיק הוכחות לעלייה, ומופיע לגביהן הדיווח 'לא זוהתה עלייה' ב-Google Ads.

חשוב לציין שהמטרה של פתרון Brand Lift של Google היא לזהות עלייה ברמת הוודאות הגבוהה ביותר, כלומר 90% ומעלה. הצגת תוצאות ברמת ודאות נמוכה יותר לא מצביעה על איכות נמוכה של התוצאות, אלא מאפשרת לקבל נתונים שלא היו זמינים אחרת.

הסבר על רמת ודאות נמוכה

תוצאות ברמת ודאות נמוכה לא מעידות בהכרח על חוסר יעילות של המודעות. התוצאות האלה יכולות לעזור לכם לקבל תובנות שצריך לאמת. אם רמת ודאות העלייה נמוכה, המשמעות היא שרזולוציית המדידה לא הספיקה כדי שהניתוח יזהה את העלייה ברמת סמך גבוהה. הסיבה לכך יכולה להיות שלא נאספו מספיק תשובות לסקר או שרמת העלייה נמוכה.

מספר נמוך של תשובות לסקר: יכולות המדידה נמוכות אם יש מספר נמוך של תשובות לסקר (פחות מ-4,100), כלומר סביר יותר להניח שרמת ודאות העלייה תהיה נמוכה יותר. באופן ספציפי, מספר התשובות לסקר יהיה נמוך יותר לכל פלח כשמפלחים את התוצאות, למשל לפי גיל, מגדר או קמפיינים. אפשר להיעזר במדידה מחדש כדי להגדיל את מספר התשובות לסקר.
עלייה אבסולוטית נמוכה: כשרמת העלייה נמוכה מ-2%, קשה לזהות אותה ברמת ודאות גבוהה. עם זאת, עלייה אבסולוטית נמוכה לא מצביעה בהכרח על רמת ביצועים נמוכה. קמפיינים עם עלייה אבסולוטית נמוכה עדיין יכולים להניב ביצועים טובים יותר מבחינת עלות לצרכן מושפע (CPLU).

השוואה בין עליות ברמת הפלח עם רמת ודאות שונה של עלייה

סביר להניח שרמת ודאות העלייה תהיה שונה בפלחים שונים, לדוגמה בקבוצות גיל שונות. כמו שהוסבר למעלה, אין להסיק שהפלח עם רמת ודאות העלייה הגבוהה ביותר הוא הפלח עם הביצועים הטובים ביותר.

קודם כול, מומלץ להיעזר בעלייה אבסולוטית או ב-CPLU כדי להשוות בין פלחים (לא מומלץ להיעזר במשתמשים מושפעים). שנית, חשוב לשים לב שביצועי העלייה בין פלחים שונים הם דומים בדרך כלל (מידת חפיפה גבוהה של רווחים בני-סמך), ולכן קשה לזהות בבירור את הפלחים הטובים ביותר. עם זאת, אם אתם רוצים לבצע אופטימיזציה של הקמפיין כך שיתמקד בפלחים שמניבים את הביצועים הטובים ביותר, מומלץ לבחור את הפלחים עם העלייה האבסולוטית הגבוהה ביותר (או ערך ה-CPLU הנמוך ביותר) כדי לקבל את ההחלטה הטובה ביותר בממוצע. עם זאת, חשוב לשים לב שככל שרמת ודאות העלייה נמוכה יותר, כך גובר הסיכוי שהסיבה לרמת הביצועים שנמדדה היא רעשי רקע. אם יש לכם כמה פלחים עם ביצועים דומים, מומלץ לבחור את הפלחים עם רמת הוודאות הגבוהה ביותר כדי למזער את הסיכון. אם אתם לא בטוחים איך לזהות את הפלחים שמניבים את הביצועים הטובים ביותר, כדאי לפנות לאיש הקשר האחראי לחשבון.

הסבר על רמות סמך ורווחים בני סמך

כשמדובר בעלייה של מודעה, בדרך כלל אנשים מתייחסים ל'אומדן נקודתי' של עלייה, כלומר רמת העלייה שהכי סביר להניח שהמודעה הניבה. אבל ב-Google Ads, תוכלו גם למצוא את האומדן 'רווח בר-סמך' עבור כל מדדי התחזקות המותג, והוא הטווח המשוער שבתוכו סביר שהתוצאה תחול. הטווח הזה מוגדר באמצעות גבול עליון ותחתון, שהם הערכים הגבוהים והנמוכים ביותר שבהם סביר להניח שתתרחש העלייה. כדי להגיע לתוצאות העלייה משתמשים ברווחים בני-סמך דו-צדדיים של 80%. כלומר, יש סיכוי של 80% שהעלייה האמיתית היא בין הגבול התחתון לגבול העליון. המשמעות היא גם שיש סיכוי של 90% שרמת העלייה גבוהה מהגבול התחתון.

דוגמה: יכול להיות שההתחזקות היחסית היא 35%, וזה האומדן הנקודתי. אבל יכול להיות גם שהרווח בר-הסמך הוא 30% עד 40%. המשמעות היא שיש סיכוי של 80% שהעלייה האמיתית היא בין 30% (הגבול התחתון) לבין 40% (הגבול העליון). דרך נוספת להסתכל על כך: יש סיכוי של 90% שרמת העלייה גבוהה מ-30% (הגבול התחתון).

חשוב לשים לב שכשרמת ודאות העלייה נמוכה מ-90%, הגבול התחתון של הרווח בר-הסמך יהיה קטן מ-0, כי Google לא יכולה להבטיח ברמת ודאות שגבוהה מ-90% שהעלייה הייתה חיובית.

שאלות נפוצות

אפשר לבחור לבד את רמת הוודאות המינימלית של העלייה?

לא. התוצאות תמיד מוצגות אם רמת הוודאות שלהן גבוהה מ-70%. אם רוצים להגביה את רף הוודאות (למשל ל-80%), צריך למחוק את התוצאות שלא עוברות את הגבול הזה. אי אפשר להגדיר גבול שנמוך מ-70%.

איך אפשר להגדיל את רמת ודאות העלייה?

רמת ודאות העלייה תלויה ברמת הדיוק של המדידה. כדי לשפר את רמת הדיוק של המדידה, אפשר:

להיעזר במדידה מחדש כדי להגדיל את איסוף התשובות לסקר.
למדוד את מדד זכירת המודעה או את המוּדעוּת כדי לקבוע מה הסיכוי הכי גבוה להשיג עלייה ברמת ודאות גבוהה.
לפנות למנהל החשבון כדי לבחור קמפיינים פרסומיים עם רמת עלייה גבוהה.

איפה אפשר לקבל מידע נוסף על אופן החישוב של המדד 'ודאות העלייה'?

תמיד יש מידה מסוימת של אקראיות טבעית בסקרים, והיא עלולה להוביל לתנודות בנתונים. מצב כזה נקרא בדרך כלל 'רעשי רקע אקראיים במדידה'. רעשי הרקע האקראיים האלה עשויים להוביל למדידה של עלייה חיובית בהתחזקות המותג, גם אם המודעות לא הניבו עלייה בפועל. הערך p-value מציין את הסבירות לכך שהסיבה לעלייה שנמדדה היא רעשי רקע, אם המודעות לא הניבו עלייה. אם הערך p-value נמוך מאוד, סביר מאוד להניח שהעלייה שנמדדה לא נבעה מרעשי רקע אקראיים, ויש ודאות גבוהה שהקמפיינים הפרסומיים הניבו עלייה.

המדד 'ודאות העלייה' מחושב לפי הנוסחה ‎1 - p-value ומבוטא כאחוז. ככל שהמספר הזה גבוה יותר (כלומר הערך p-value נמוך יותר), כך יש ודאות גבוהה יותר שהמודעות הניבו עלייה.

דוגמה 1: במודעה מוצגת עלייה אבסולוטית של 5% והערך p-value הוא 0.01: המשמעות היא שיש סיכוי של 1% לעלייה של 5% עקב רעשי רקע אקראיים במדידה. כלומר, יש רמת ודאות גבוהה (99%) לכך שמודעה הניבה עלייה.

דוגמה 2: במודעה מוצגת עלייה אבסולוטית של 5% והערך p-value הוא 0.35: המשמעות היא שיש סיכוי של 35% לעלייה של 5% עקב רעשי רקע אקראיים במדידה. כלומר, יש רמת ודאות נמוכה (65%) ואין מספיק הוכחות לכך שהמודעה הניבה עלייה.

למה רמת ודאות העלייה יכולה להיות נמוכה בפלחים?

כשמפלחים נתונים לפי פלח מסוים, למשל לפי קמפיינים, לכל פלח יש רק קבוצת משנה של כל התשובות לסקר. בפלחים הנפרדים יש פחות תשובות לסקר בהשוואה למחקר הכולל, ולכן יהיה קשה יותר לזהות עלייה ברמת ודאות גבוהה. חשוב לזכור שאם לפלח אחד יש פוטנציאל חשיפה גדול יותר מזה של פלח אחר, למשל אם לקמפיין אחד יש תקציב גדול יותר מהתקציב של קמפיין אחר, הפלח הזה יאסוף יותר תשובות לסקר וסביר להניח שתהיה לו רמת ודאות גבוהה יותר של עלייה למרות שרמת העלייה בסגמנט הזה עשויה להיות נמוכה יותר. הקושי הגדול ביותר הוא זיהוי העלייה בפלחים עם פוטנציאל החשיפה הקטן ביותר.

איפה אפשר לראות את רמת הוודאות של כל פלח?

מתחת לתרשימים בדוח העלייה מוצגת טבלה שניתנת להרחבה. אפשר לעיין בטבלה כדי לראות את כל מדדי העלייה, כולל רמת ודאות העלייה.

איפה אפשר לראות את הרווחים בני-הסמך?

הרווחים בני-הסמך נכללים בתרשימי עלייה, וניתן לראות אותם כשמעבירים את העכבר מעל תוצאות העלייה בטבלאות. בתרשימים אפשר לבחון את רמת אי-הוודאות במדידה. בנוסף, כשמשווים בין פלחים, אפשר לבדוק במהירות אם יש חפיפה בין הרווחים בני-הסמך של שני הפלחים. ככל שמידת החפיפה גבוהה יותר, כך יש ודאות נמוכה יותר לכך שפלח אחד טוב יותר מפלח אחר. בכל התרשימים, הערכים של הרווחים בני-הסמך נחתכים ב-0, אבל אפשר לראות את הערכים המדויקים כשמעבירים את העכבר מעל תוצאות העלייה בטבלאות.

קישורים רלוונטיים

האם המידע הועיל?

איך נוכל לשפר את המאמר?