Ανάλυση της δοκιμής A/B και λήψη μέτρων

Τα δεδομένα ενημερώνονται τακτικά στη σελίδα της ομάδας διαμεσολάβησης. Οποιαδήποτε στιγμή κατά τη διάρκεια της περιόδου 90 ημερών, μπορείτε να λάβετε μια απόφαση, με βάση τα δεδομένα, να τερματίσετε τη δοκιμή και να δεσμευτείτε σε κάποια παραλλαγή. Η δέσμευση σε μια παραλλαγή σημαίνει ότι επιλέγετε να χρησιμοποιήσετε μία από τις παραλλαγές ως διαμόρφωση της ομάδας διαμεσολάβησης για το 100% των χρηστών σας. 

Για να αποκτήσετε πρόσβαση και να παρακολουθήσετε τη δοκιμή Α/Β: 

1. Συνδεθείτε στον λογαριασμό σας στο AdMob, στη διεύθυνση https://apps.admob.com.
2. Κάντε κλικ στην επιλογή Διαμεσολάβηση στην πλευρική γραμμή.
3. Επιλέξτε την ομάδα διαμεσολάβησης με τη δοκιμή A/B που θέλετε να δείτε.

Για να σας βοηθήσει να αναλύσετε τα αποτελέσματα της δοκιμής A/B, το AdMob αναφέρει τα μηνιαία κέρδη σε κλίμακα της παραλλαγής A και της παραλλαγής B. Τα μηνιαία κέρδη σε κλίμακα αποτελούν μια εκτίμηση των κερδών που θα αποκομίσετε σε 28 ημέρες, αν εφαρμόσετε αυτήν την παραλλαγή στο 100% των χρηστών. Με αυτόν τον τρόπο, παρέχεται μια δίκαιη σύγκριση και μια ακριβέστερη εικόνα σχετικά με την απόδοση κάθε παραλλαγής.

Σημείωση: Το AdMob αρχίζει να υπολογίζει τα μηνιαία κέρδη σε κλίμακα τέσσερις ημέρες αφού ξεκινήσετε τη δοκιμή A/B και εξασφαλίσετε 10.000 εμφανίσεις.

Ελέγξτε τη διαφορά των μηνιαίων κερδών σε κλίμακα, στο επάνω μέρος της σελίδας δοκιμής A/B, για να κατανοήσετε πόσο μεγάλη είναι η διαφορά μεταξύ των παραλλαγών.

Θα δείτε επίσης τα εκτιμώμενα κέρδη, το eCPM και το ποσοστό αντιστοίχισης της παραλλαγής A και της παραλλαγής B, τα οποία θα ενημερώνονται σε όλη τη διάρκεια της δοκιμής. Αυτά τα δεδομένα εμφανίζουν επίσης την απόδοση κάθε πηγής διαφήμισης σε κάθε παραλλαγή, ώστε να μπορείτε να συγκρίνετε εύκολα την απόδοση μιας πηγής διαφήμισης και στις δύο παραλλαγές.

Κατανόηση των αποτελεσμάτων

Όταν ξεκινήσει μια δοκιμή, το AdMob συγκρίνει τα μηνιαία κέρδη σε κλίμακα και στις δύο παραλλαγές, για να προσδιορίσει την παραλλαγή που θα έχει τη βέλτιστη απόδοση. Το AdMob εμφανίζει την κορυφαία παραλλαγή στη σελίδα της δοκιμής A/B, αφού προσδιορίσει ότι μια παραλλαγή παρουσιάζει σταθερά και σημαντικά καλύτερη απόδοση από την άλλη. Θα παρέχουμε επίσης μια προτεινόμενη ενέργεια: Διατήρηση αρχικής (αν η παραλλαγή A έχει καλύτερη απόδοση) ή Εφαρμογή παραλλαγής (αν η παραλλαγή Β έχει καλύτερη απόδοση). 

Επίσης, θα εμφανίζουμε τον βαθμό βεβαιότητας που έχει το AdMob για την κορυφαία παραλλαγή, παρέχοντας την εκτιμώμενη ποσοστιαία πιθανότητα [π.χ. 99% (εκτιμώμενη) πιθανότητα ότι η παραλλαγή Α θα έχει καλύτερη απόδοση από την Β]. 

Το AdMob καθορίζει την κορυφαία παραλλαγή και την εκτιμώμενη ποσοστιαία πιθανότητα χρησιμοποιώντας τα ακόλουθα κριτήρια:

• Με πόση συνέπεια επιδεικνύει η αρχική παραλλαγή καλύτερη απόδοση από την άλλη. 
• Το μέγεθος της διαφοράς ανάμεσα στις δύο παραλλαγές. 
• Τον όγκο των διαθέσιμων δεδομένων. Προτείνουμε να επιλέξετε ένα στοιχείο διαφημίσεων με σημαντική επισκεψιμότητα, για να αυξήσετε τον όγκο των διαθέσιμων δεδομένων κατά τη διάρκεια της δοκιμής. Έχετε υπόψη ότι η δοκιμή θα πρέπει να λάβει τουλάχιστον 10.000 αιτήματα για διαφημίσεις, προκειμένου το AdMob να καθορίσει τα αποτελέσματα. 

Η υψηλότερη συνέπεια και η μεγαλύτερη διαφορά στην απόδοση, καθώς και υψηλός όγκος δεδομένων, βοηθούν το AdMob να αυξήσει την εκτιμώμενη ποσοστιαία πιθανότητα. 

Αν κάποιο από αυτά τα κριτήρια δεν ικανοποιείται, το AdMob δεν θα είναι σε θέση να καθορίσει μια κορυφαία παραλλαγή. Σε αυτήν την περίπτωση, δεν θα δείτε οριστικά αποτελέσματα στη σελίδα δοκιμής A/B. Ωστόσο, θα μπορείτε ακόμα να βλέπετε τις μετρήσεις από τη δοκιμή για κάθε παραλλαγή. 

Όταν η κατανομή χρηστών έχει οριστεί σε λιγότερο από 50%, τα δεδομένα για την παραλλαγή B αποτελούν υπολογισμό προσαρμοσμένης κλίμακας. Αυτό σημαίνει ότι τα δεδομένα αποτελούν δίκαια σύγκριση, επειδή το AdMob υπολογίζει τα δεδομένα για την παραλλαγή Β, σαν να λάμβανε ίσο μερίδιο χρηστών.

Για παράδειγμα, αν η κατανομή χρηστών για την παραλλαγή Β έχει οριστεί σε 10%, τα εκτιμώμενα κέρδη θα πολλαπλασιαστούν επί 9. Με αυτόν τον τρόπο, μπορείτε να κάνετε μια δίκαιη σύγκριση με την παραλλαγή A (η οποία έχει κατανομή χρηστών 90%). Συνεπώς, αν η παραλλαγή B κερδίσει 10 $, ο προβλεπόμενος υπολογισμός των κερδών της παραλλαγής Β είναι 90 $. 

Λήψη μέτρων

Συνιστάται η εκτέλεση της δοκιμής για τουλάχιστον δύο εβδομάδες, προτού προβείτε σε κάποια ενέργεια. Μπορείτε να δεσμευτείτε σε μια παραλλαγή ανά πάσα στιγμή κατά τη διάρκεια των 90 ημερών. Η δέσμευση σε μια παραλλαγή σημαίνει ότι επιλέγετε να χρησιμοποιήσετε μία από τις παραλλαγές ως διαμόρφωση της ομάδας διαμεσολάβησης για το 100% των χρηστών σας. Λάβετε υπόψη τη διαφορά στα εκτιμώμενα κέρδη και την ποσοστιαία εκτιμώμενη πιθανότητα, όταν αποφασίσετε να δεσμευτείτε σε μια παραλλαγή. 

Μπορείτε να επιλέξετε να διατηρήσετε την παραλλαγή Α ή να εφαρμόσετε την παραλλαγή Β: 

• Για να επιλέξετε την παραλλαγή A, κάντε κλικ στην επιλογή Διατήρηση. Αυτό σημαίνει ότι θα διατηρηθεί η αρχική διαμόρφωση της ομάδας διαμεσολάβησης.
• Για να επιλέξετε την παραλλαγή B, κάντε κλικ στην επιλογή Εφαρμογή. Αυτό σημαίνει ότι θα εφαρμόσουμε τις ρυθμίσεις της παραλλαγής στον λογαριασμό σας.

Εάν δεν δεσμευτείτε σε μια παραλλαγή έως το τέλος των 90 ημερών, η δοκιμή σταματά και η παραλλαγή Α θα χρησιμοποιείται σε όλους τους χρήστες, ακόμα και αν δεν είχε την καλύτερη απόδοση στη δοκιμή. 

Έχετε 30 ημέρες μετά τη λήξη του πειράματος για να επιλέξετε μια παραλλαγή, προτού λήξει η δοκιμή και διαγραφεί η παραλλαγή Β. 

Σημείωση: Περισσότερες πληροφορίες σχετικά με τις δοκιμές A/B διατίθενται στην αναφορά Διαμεσολάβηση.