วิเคราะห์การทดสอบ A/B และดําเนินการ

ข้อมูลจะอัปเดตเป็นประจําในหน้ากลุ่มสื่อกลาง ในช่วง 90 วันคุณสามารถดูข้อมูลแล้วตัดสินใจได้ทุกเมื่อว่าจะเลือกตัวแปรใด ซึ่งหมายความว่าคุณกำลังเลือกใช้ตัวแปรใดตัวแปรหนึ่งเป็นการกําหนดค่ากลุ่มสื่อกลางสําหรับผู้ใช้ทั้ง 100%

วิธีเข้าถึงและตรวจสอบการทดสอบ A/B มีดังนี้

1. ลงชื่อเข้าใช้บัญชี AdMob ที่ https://admob.google.com
2. คลิกสื่อกลางในแถบด้านข้าง
3. เลือกกลุ่มสื่อกลางที่มีการทดสอบ A/B ที่คุณต้องการดู

AdMob จะรายงานรายได้ต่อเดือนที่ปรับขนาดแล้วของตัวแปร A และตัวแปร B เพื่อช่วยให้คุณวิเคราะห์ผลการทดสอบ A/B ได้ รายได้ต่อเดือนที่ปรับขนาดแล้ว คือค่าประมาณของจํานวนเงินที่คุณจะได้รับใน 28 วันหากคุณใช้ตัวแปรนี้กับผู้ใช้ทั้ง 100% ซึ่งจะให้การเปรียบเทียบอย่างเป็นธรรม และเห็นภาพการทำงานของตัวแปรแต่ละตัวได้อย่างถูกต้องชัดเจนยิ่งขึ้น

หมายเหตุ: AdMob เริ่มคํานวณรายได้ต่อเดือนที่ปรับขนาดแล้ว 4 วันหลังจากที่คุณเริ่มการทดสอบ A/B และมีการแสดงผล 10,000 ครั้ง

ตรวจสอบความแตกต่างของรายได้ต่อเดือนที่ปรับขนาดแล้วได้ที่ด้านบนของหน้าการทดสอบ A/B เพื่อทำเข้าใจระดับความแตกต่างระหว่างตัวแปร

แผนภูมิจะแสดงประสิทธิภาพของแหล่งที่มาของโฆษณาแต่ละแหล่งสำหรับแต่ละตัวแปร คุณจึงสามารถเปรียบเทียบประสิทธิภาพของแหล่งที่มาของโฆษณาระหว่างตัวแปรทั้งสองได้อย่างง่ายดาย แผนภูมิเหล่านี้ช่วยให้คุณตีความผลการทดสอบได้ง่ายและชัดเจนขึ้น แผนภูมิสรุปจะแสดงภาพรวมของเมตริกหลัก คุณสามารถวางเมาส์เหนือเมตริกในแผนภูมิสรุปเพื่อดูประสิทธิภาพของแต่ละตัวแปรสําหรับเมตริกหลักนั้น

คุณจะเห็นรายได้ที่ปรับขนาดแล้ว, eCPM, อัตราการจับคู่ และการแสดงผลที่ปรับขนาดแล้วของตัวแปร A และตัวแปร B ซึ่งจะได้รับการอัปเดตตลอดการทดสอบ คุณสามารถคลิกแท็บของเมตริกแต่ละรายการเพื่อดูแผนภูมิเส้นอย่างละเอียดยิ่งขึ้นได้ แผนภูมิเส้นแต่ละแผนภูมิแสดงข้อมูลรายวันและตัวแปร B บนผังเป็นเปอร์เซ็นต์การเปลี่ยนแปลงเทียบกับตัวแปร A 

ทําความเข้าใจผลลัพธ์

หมายเหตุ: ผลการทดสอบเป็นค่าประมาณ ค่าที่คาดการณ์ไว้จะแสดงเป็นข้อมูลอ้างอิงสำหรับการเพิ่มประสิทธิภาพสื่อกลาง และไม่ได้เป็นการรับประกันผลลัพธ์สุดท้าย

เมื่อการทดสอบเริ่มต้นขึ้น AdMob จะเปรียบเทียบรายได้ต่อเดือนที่ปรับขนาดแล้วในตัวแปรทั้งสอง เพื่อดูว่าตัวแปรใดทำงานได้มีประสิทธิภาพมากที่สุด AdMob จะแสดงตัวแปรที่นำอยู่ในหน้าการทดสอบ A/B หลังจากพิจารณาแล้วว่าตัวแปรนั้นทำงานมีประสิทธิภาพดีกว่าอีกตัวแปรหนึ่งเป็นอย่างมากและอย่างสม่ำเสมอ นอกจากนี้ เราจะเสนอการดําเนินการที่แนะนํา ได้แก่ "คงค่าเดิมไว้" (หากตัวแปร A มีประสิทธิภาพดีกว่า) หรือ "ใช้ตัวแปร" (หากตัวแปร B มีประสิทธิภาพดีกว่า)

หากต้องการปรับเปลี่ยนการทดสอบขณะที่ดำเนินอยู่ ให้คลิกแก้ไขการทดสอบ ซึ่งจะเป็นการสิ้นสุดการทดสอบปัจจุบันและสร้างฉบับร่างของการทดสอบใหม่ที่มีการตั้งค่าเดียวกันซึ่งคุณแก้ไขได้ ทั้งนี้ เพื่อให้ได้ผลลัพธ์และคำแนะนำที่ถูกต้อง คุณจะแก้ไขการทดสอบแบบเรียลไทม์ไม่ได้ โปรดทราบว่าการทดสอบต้องใช้เวลาจึงจะเห็นผลลัพธ์ ดังนั้นไม่ควรสิ้นสุดการทดสอบก่อนเวลาอันควรโดยยึดตามผลลัพธ์เบื้องต้น

AdMob จะใช้เกณฑ์ต่อไปนี้ในการระบุตัวแปรที่นำอยู่และเปอร์เซ็นต์ความเป็นไปได้โดยประมาณที่ตัวแปรที่นำอยู่มีประสิทธิภาพเหนือกว่าอีกตัวแปรหนึ่งอย่างแท้จริง

• ตัวแปรที่นำอยู่มีประสิทธิภาพดีกว่าอีกตัวแปรหนึ่งอย่างสม่ำเสมอเพียงใด
• ระดับความแตกต่างระหว่างตัวแปรทั้งสอง
• ปริมาณข้อมูลที่ใช้ได้ เราขอแนะนําให้เลือกหน่วยโฆษณาที่มีปริมาณการเข้าชมสูงเพื่อเพิ่มปริมาณข้อมูลที่ใช้ได้ในระหว่างการทดสอบ โปรดทราบว่าการทดสอบต้องได้รับคําขอโฆษณาอย่างน้อย 10,000 รายการก่อน AdMob จึงจะระบุผลลัพธ์ได้

ความสม่ำเสมอที่สูงขึ้น และความแตกต่างของประสิทธิภาพที่มากขึ้น รวมถึงปริมาณข้อมูลที่สูง จะช่วยให้ AdMob เพิ่มเปอร์เซ็นต์ความเป็นไปได้โดยประมาณที่ตัวแปรที่นำอยู่มีประสิทธิภาพเหนือกว่าอีกตัวแปรหนึ่งอย่างแท้จริง

หากไม่ตรงตามเกณฑ์เหล่านี้ AdMob จะไม่สามารถระบุตัวแปรที่นำอยู่ได้ ในกรณีนี้ คุณจะไม่เห็นผลลัพธ์ที่สรุปในหน้าการทดสอบ A/B แต่จะยังคงดูเมตริกจากการทดสอบสําหรับแต่ละตัวแปรได้

เกี่ยวกับการตั้งค่าการจัดสรรผู้ใช้สําหรับตัวแปร B

เมื่อตั้งค่าการจัดสรรผู้ใช้ไม่ถึง 50% ระบบจะคำนวณข้อมูลสำหรับตัวแปร B เป็นสัดส่วน ซึ่งหมายความว่าข้อมูลนี้เป็นการเปรียบเทียบอย่างเป็นธรรม เนื่องจาก AdMob จะคํานวณข้อมูลของตัวแปร B ราวกับได้รับส่วนแบ่งผู้ใช้เป็นจำนวนเท่าๆ กัน

เช่น ถ้าตั้งค่าการจัดสรรผู้ใช้สําหรับตัวแปร B เป็น 10% รายได้โดยประมาณจะมีสัดส่วนเป็น 9 ซึ่งจะทําให้คุณเปรียบเทียบกับตัวแปร A อย่างเป็นธรรมได้ (ซึ่งมีการจัดสรรผู้ใช้ 90%) ดังนั้นหากตัวแปร B มีรายได้ 300 บาท เมื่อคํานวณตามสัดส่วนของรายได้ของตัวแปร B ก็จะเป็น 2,700 บาท

ดำเนินการ

เราขอแนะนําให้ปล่อยให้การทดสอบทํางานอย่างน้อย 2 สัปดาห์ก่อนดําเนินการ คุณตัดสินใจเลือกตัวแปรได้ทุกเมื่อในช่วง 90 วัน ซึ่งหมายความว่าคุณกำลังเลือกใช้ตัวแปรใดตัวแปรหนึ่งเป็นการกําหนดค่ากลุ่มสื่อกลางสําหรับผู้ใช้ทั้ง 100% เมื่อจะตัดสินใจเลือกตัวแปร โปรดพิจารณาความแตกต่างของรายได้โดยประมาณและเปอร์เซ็นต์ความเป็นไปได้โดยประมาณที่ตัวแปรที่นำอยู่มีประสิทธิภาพเหนือกว่าอีกตัวแปรหนึ่งอย่างแท้จริง

เคล็ดลับ: คลิกดูรายงานเพื่อดูการวิเคราะห์ผลลัพธ์การทดสอบที่ละเอียดยิ่งขึ้น

คุณเลือกว่าจะใช้ตัวแปร A ต่อไปหรือใช้ตัวแปร B ได้โดยทำดังนี้

• หากต้องการเลือกตัวแปร A ให้คลิกใช้ตัวแปร A ต่อไป ซึ่งหมายความว่าระบบจะยังคงใช้การกําหนดค่าเดิมของกลุ่มสื่อกลาง
• หากต้องการเลือกตัวแปร B ให้คลิกใช้ตัวแปร B ซึ่งหมายความว่าเราจะนำการตั้งค่าของตัวแปรดังกล่าวไปใช้กับบัญชีของคุณ

หากคุณไม่ได้เลือกตัวแปรภายใน 90 วัน การทดสอบจะหยุดลงและระบบจะใช้ตัวแปร A กับผู้ใช้ทั้ง 100% แม้ว่าตัวแปร A จะไม่ได้ให้ผลลัพธ์ที่ดีที่สุดในการทดสอบก็ตาม

คุณมีเวลา 30 วันหลังจากที่การทดสอบสิ้นสุดลงในการเลือกตัวแปร ก่อนที่การทดสอบจะหมดอายุและระบบจะลบตัวแปร B

หมายเหตุ: ดูข้อมูลเพิ่มเติมเกี่ยวกับการทดสอบ A/B ได้ในรายงานสื่อกลาง