איך משתמשים בבדיקות A/B בתהליך בחירת הרשת (Mediation)

כדי למקסם את הביצועים של תהליך בחירת הרשת (Mediation), אפשר לבצע בדיקות A/B של הגדרות שונות של הקבוצה לבחירת רשת ‎#A/Btests‏ ‎#waterfalladsources‏ ‎#biddingadsources

אתם יכולים להשתמש בבדיקות A/B כדי לקבל החלטות מושכלות לגבי מקורות המודעות שתגדירו בתהליך בחירת הרשת, וכך להגדיל את הרווחים.

הנושאים בדף

• הסבר על בדיקות A/B
• איך מגדירים בדיקת A/B
• שיטות מומלצות

הסבר על בדיקות A/B

בבדיקות A/B אפשר לבחון 2 וריאציות של הקבוצה לבחירת רשת (Mediation) ולהשוות בין התוצאות שמתקבלות. במסגרת בדיקה כזו, בוחרים קבוצה קיימת לבחירת רשת, יוצרים וריאציה שלה ובוחנים את הביצועים של שתיהן. המשתמשים באפליקציה מפוצלים בין הקבוצה הקיימת לבין הווריאציה, וכך שאפשר לבדוק אותן במקביל.

כדי ליצור וריאציה (וריאנט B), אפשר לשנות את ההגדרה של הקבוצה לבחירת רשת (Mediation). אפשר למשל:

• להוסיף או להסיר מקורות מודעות כדי להעריך איך הם משפיעים על הקבוצה לבחירת רשת
• לשנות את ערך העלות בפועל לאלף חשיפות שהוגדר באופן ידני למקורות מודעות, כדי שהסדר שלהם ב-Waterfall ישתנה בהתאם
• להפעיל או להשבית אופטימיזציה של מקורות מודעות ב-Waterfall
• לשנות את מספר הפעמים שנשלחת קריאה למקור מודעות

הערה: כדי שמערכת AdMob תוכל להחליט מה התוצאה, הבדיקה חייבת לקבל לפחות 10,000 בקשות למודעות.

אפשר ללחוץ על הבדיקה לדוגמה שכאן

הבדיקה נמשכת 90 יום, אבל אפשר לעצור אותה מתי שרוצים. על סמך תוצאות הבדיקה, אפשר להחליט אם להשתמש בהגדרה המקורית של הקבוצה לבחירת רשת (וריאנט A) או בווריאציה (וריאנט B).

הערה: מרגע שמפעילים בדיקת A/B אי אפשר לעשות שינויים בווריאנט A או בווריאנט B אלא אם עוצרים את הבדיקה או שהיא מסתיימת. זה עוזר לנו לשמור על הגינות ודיוק בבדיקה.

איך מגדירים בדיקת A/B

כך עושים את זה:

1. נכנסים לחשבון AdMob בכתובת https://admob.google.com.
2. בסרגל הצד, לוחצים על תהליך בחירת הרשת (Mediation).
3. מציבים את הסמן מעל הקבוצה לבחירת רשת שרוצים ליצור לה בדיקת A/B, ולוחצים על הסמל . לאחר מכן לוחצים על הגדרה של בדיקת A/B. 
4. נותנים שם לבדיקה.
5. מגדירים את הקצאת המשתמשים בעזרת פס ההזזה. ההגדרה הזו קובעת את אחוז המשתמשים באפליקציה שיוקצו לווריאנט B במהלך בדיקת ה-A/B. ניתן להקצות לווריאנט B‏ 1% עד 50% מתנועת המשתמשים באפליקציה. שאר המשתמשים נשארים בווריאנט A (המקורי).
   הערה: אחרי שמגדירים את הקצאת המשתמשים ומפעילים את הבדיקה, אי אפשר לשנות את ההקצאה.
6. אם כבר ביצעתם בדיקת A/B לקבוצה לבחירת רשת, אתם יכולים להשתמש בתפריט הנפתח של וריאנט B כדי להעתיק ולהחיל את ההגדרות של הווריאציה מבדיקה קודמת.
7. משנים את ההגדרה של מקורות המודעות בווריאנט B. אתם יכולים:
   • להוסיף או להסיר מקורות מודעות כדי להעריך איך הם משפיעים על הקבוצה לבחירת רשת
   • להגדיר את הסף התחתון לבידינג לפי עלות בפועל לאלף חשיפות כדי להריץ בדיקות A/B על ערכי סף שונים
   • לשנות את ערך העלות בפועל לאלף חשיפות שהוגדר ידנית, כדי שהסדר של מקורות המודעות ב-Waterfall ישתנה בהתאם
   • להפעיל או להשבית אופטימיזציה של מקורות מודעות ב-Waterfall
   • לשנות את מספר הפעמים שנשלחת קריאה למקור מודעות
8. כשמשתמשים באותו מקור מודעות גם בווריאנט A וגם בווריאנט B, מומלץ להשתמש במיפויים ייחודיים של יחידות מודעות כדי לוודא שהדוחות יהיו מדויקים. לדוגמה, אפשר להשתמש במיפוי שלא נמצא בשימוש בווריאנט A.
   • בעמודה "מיפוי יחידת המודעות", לוחצים על עריכה. ברוב המקרים, פרטי המיפוי מופיעים בחשבון שלכם ברשת המודעות.
     בקישורים הבאים מוסבר איך מוסיפים מקורות של מודעות ב-Waterfall ואיך מוסיפים מקורות של מודעות לבידינג.
9. לוחצים על שמירה.
10. לוחצים על הפעלת הבדיקה.
    הערה: אחרי שמפעילים בדיקת A/B, אי אפשר לבצע שינויים בקבוצה לבחירת רשת (לא בווריאנט A ולא בווריאנט B) עד שעוצרים את הבדיקה או שהיא מסתיימת. כל שינוי שיתבצע בזמן שהניסוי פעיל עשוי להשפיע על התוצאות. במילים אחרות, מרגע שהבדיקה מתחילה אי אפשר לערוך את יחידות המודעות, את הטירגוט למיקום גיאוגרפי וכו'.
11. בתיבת האישור, לוחצים על הפעלה. הבדיקה תתחיל כמה דקות אחר כך.

כברירת מחדל, הבדיקה נמשכת 90 יום. אם תחליטו להפסיק את הבדיקה באמצע, או שהגעתם להחלטה על סמך הנתונים שהתקבלו עד עכשיו, בחרו באפשרות המשך השימוש בווריאנט A או באפשרות שימוש בווריאנט B.

כאן מוסבר איך לנתח בדיקת A/B ולפעול על סמך הנתונים.

שיטות מומלצות

• לצורך הבדיקה כדאי לבחור יחידות מודעות שמושכות מספיק תנועה, כדי שאפשר יהיה לקבל תוצאה ברורה וחד-משמעית. כדי שמערכת AdMob תוכל להחליט מה התוצאה, הבדיקה חייבת לקבל לפחות 10,000 בקשות למודעות.
• רצוי לשנות רק הגדרה אחת בכל בדיקה, כדי שאפשר יהיה לייחס את ההבדל בביצועים יותר במדויק לשינוי מסוים.
• מומלץ להריץ את הבדיקה למשך שבועיים לפחות. ככל שיצטברו יותר נתונים, נוכל להעריך בצורה מדויקת יותר איזה וריאנט יניב את הביצועים הטובים ביותר.
• כדאי להגדיר מיפויים שונים לווריאנט A ולווריאנט B. כך תוכלו לשמור על הדיוק של נתוני הבדיקה והדוחות שמתייחסים למקורות המודעות ב-Waterfall.