Chạy thử nghiệm A/B cho trang thông tin trên Cửa hàng Play

Để giúp nhà phát triển có thêm quyền kiểm soát cũng như nhiều số liệu thống kê hơn, mới đây chúng tôi thực hiện một số thay đổi đối với thử nghiệm trang thông tin trên cửa hàng Play trong Play Console. Chúng tôi bổ sung 3 tính năng mới:

  • cấu hình tham số thử nghiệm;
  • một máy tính để ước tính số mẫu cần thiết cũng như thời gian hoàn thành; và
  • khoảng tin cậy nay cho phép giám sát liên tục. 

Trang này đã được cập nhật để phản ánh những thay đổi đó. 

Các tính năng được mô tả trên trang này hiện chỉ dành cho một số nhà phát triển.

Để giúp tối ưu hóa trang thông tin của bạn trên Cửa hàng Google Play, bạn có thể chạy các thử nghiệm để tìm ra văn bản đã bản địa hóa và loại đồ họa hiệu quả nhất cho ứng dụng của mình. Bạn có thể chạy thử nghiệm với các trang thông tin chính cũng như trang thông tin tùy chỉnh.

Đối với ứng dụng đã phát hành, bạn có thể thử nghiệm các biến thể so với phiên bản hiện tại để biết biến thể nào có hiệu suất tốt nhất dựa trên dữ liệu về tình trạng cài đặt. Trước khi thiết lập thử nghiệm, hãy xem lại các phương pháp tốt nhất để chạy thử nghiệm hiệu quả.

Lưu ý: Các thử nghiệm toàn cầu đã được đổi tên thành các thử nghiệm đồ họa mặc định. Các thử nghiệm này vẫn duy trì chức năng giống như trước khi đổi tên.

Các loại thử nghiệm

Bạn có thể chạy một thử nghiệm đồ họa mặc định hoặc tối đa năm thử nghiệm bản địa hóa cùng lúc cho mỗi ứng dụng.

Đồ họa mặc định

Khi sử dụng thử nghiệm đồ họa mặc định, bạn có thể thử nghiệm nội dung đồ họa bằng ngôn ngữ mặc định của trang thông tin về ứng dụng trên Cửa hàng Play. Bạn có thể bao gồm các biến thể của biểu tượng, hình nổi bật, ảnh chụp màn hình và video quảng cáo của ứng dụng.

  • Nếu danh sách cửa hàng của ứng dụng của bạn chỉ có bằng một ngôn ngữ: Các thử nghiệm đồ họa mặc định sẽ được hiển thị cho tất cả người dùng.
  • Nếu bạn đã thêm bất kỳ nội dung đồ họa được bản địa hóa nào bằng một ngôn ngữ cụ thể: Người dùng xem ứng dụng của bạn bằng ngôn ngữ đó sẽ bị loại trừ khỏi các thử nghiệm đồ họa mặc định của ứng dụng. Ví dụ: nếu ngôn ngữ mặc định của ứng dụng là tiếng Anh và ứng dụng có hình nổi bật đã bản địa hóa bằng tiếng Pháp, thì người dùng xem ứng dụng của bạn bằng tiếng Pháp sẽ bị loại trừ khỏi thử nghiệm (ngay cả khi bạn đang thử nghiệm biểu tượng).
Đã bản địa hóa (đối với văn bản và nội dung đồ họa)

Với thử nghiệm bản địa hoá, bạn có thể thử nghiệm biểu tượng, ảnh nổi bật, ảnh chụp màn hình, video quảng cáo và/hoặc nội dung mô tả ứng dụng bằng tối đa 5 ngôn ngữ. Biến thể thử nghiệm sẽ chỉ được hiển thị với người dùng xem danh sách cửa hàng của ứng dụng bằng các ngôn ngữ bạn chọn.

Nếu danh sách cửa hàng của ứng dụng chỉ có một ngôn ngữ, các thử nghiệm đã bản địa hóa sẽ chỉ hiển thị với người dùng xem ứng dụng bằng ngôn ngữ mặc định của ứng dụng đó.

Bước 1: Tạo thử nghiệm

Cách tạo thử nghiệm trong Play Console:

  1. Mở Play Console rồi chuyển đến trang Thử nghiệm trang thông tin cửa hàng (Phát triển > Sự hiện diện trong cửa hàng > Thử nghiệm trang thông tin cửa hàng).
  2. Nhấp vào Tạo thử nghiệm.
  3. Nhập thông tin chi tiết cho thử nghiệm:
    • Tên thử nghiệm: Nhập tên của thử nghiệm (tối đa 50 ký tự).
    • Trang thông tin trên Cửa hàng Play: Chọn trang thông tin trên cửa hàng Play nơi bạn muốn chạy thử nghiệm.
    • Loại thử nghiệm: Chọn Thử nghiệm đồ hoạ mặc định hoặc Thử nghiệm bản địa hóa.
  4. Nhấp vào Tiếp theo.
  5. Tiếp tục làm theo hướng dẫn trong "Bước 2: Thiết lập thử nghiệm".

Bước 2: Thiết lập thử nghiệm

Sau khi đã tạo một thử nghiệm, bạn có thể chọn danh sách cửa hàng, các biến thể và thuộc tính mà bạn muốn kiểm tra.

Cách thiết lập thử nghiệm:

  1. Làm theo hướng dẫn trên màn hình để chọn trang thông tin trên Cửa hàng Play rồi thêm mục tiêu thử nghiệm, chẳng hạn như chỉ số mục tiêu, đối tượng thử nghiệm, biến thể và các chế độ cài đặt khác.
  2. Để bắt đầu thử nghiệm của bạn, hãy chuyển đến đầu trang rồi nhấp vào Chạy thử nghiệm.
  3. Để hoàn tất quá trình thiết lập thử nghiệm vào lúc khác, hãy nhấp vào Lưu.
Xem nội dung mô tả các trường thông tin, ví dụ và mẹo

Khi thiết lập thử nghiệm, bạn phải cung cấp thông tin dưới đây về trang thông tin trên Cửa hàng Play.

Trường Mô tả Ví dụ và mẹo
Tên thử nghiệm

Tên thử nghiệm chỉ xuất hiện trong Play Console nhằm xác định thử nghiệm chứ người dùng không nhìn thấy tên này.

  • "Thử nghiệm biểu tượng sáng"
  • "Ảnh biểu tượng nổi bật"
  • "Mô tả ngắn với khẩu hiệu mới"
Trang thông tin trên Cửa hàng Play Trang thông tin trên Cửa hàng Play (chính hoặc tuỳ chỉnh) mà bạn muốn thử nghiệm.

Sau khi bạn bắt đầu một thử nghiệm, tên danh sách cửa hàng tùy chỉnh của bạn được hiển thị với tên của danh sách đó khi bắt đầu thử nghiệm. Nếu bạn cập nhật tên của danh sách cửa hàng tùy chỉnh sau khi bắt đầu thử nghiệm, tên của danh sách sẽ không thay đổi trong thử nghiệm đó.

Để tránh nhầm lẫn khi chạy thử nghiệm, bạn nên xoá các trang thông tin tuỳ chỉnh không còn dùng nữa trên Cửa hàng Play và tạo trang mới khi cần.


Khi thiết lập thử nghiệm, bạn phải cung cấp thông tin dưới đây về mục tiêu thử nghiệm. Những chế độ cài đặt này sẽ ảnh hưởng đến độ chính xác của thử nghiệm cũng như số lượng người cài đặt cần thiết để cho ra kết quả.

Trường Mô tả Ví dụ và mẹo
Chỉ số mục tiêu Chỉ số này sẽ được dùng để xác định kết quả thử nghiệm.

Bạn có hai lựa chọn: 

  • Số người cài đặt lần đầu tiên mà chưa gỡ cài đặt (nên dùng): Số người dùng lần đầu cài đặt ứng dụng và giữ lại ứng dụng trong ít nhất 1 ngày
  • Số người cài đặt lần đầu tiên: Số người dùng lần đầu cài đặt ứng dụng, bất kể họ có giữ lại ứng dụng đó hay không
Biến thể Số biến thể thử nghiệm để so sánh với trang thông tin hiện tại trên Cửa hàng Play. Nếu chỉ thử nghiệm trên một biến thể duy nhất thì thời gian hoàn tất thử nghiệm sẽ ngắn hơn.

Để thêm phiên bản mới vào thử nghiệm, hãy chọn một tuỳ chọn khác trong trình đơn Biến thể dạng trình đơn thả xuống.

Bạn có thể thêm tối đa 3 biến thể cho mỗi thử nghiệm (ngoài phiên bản hiện tại).

Đối tượng tham gia thử nghiệm

Phần trăm số khách truy cập trang thông tin trên Cửa hàng Play sẽ thấy phiên bản thử nghiệm thay vì trang thông tin hiện tại. 

Số lượng khách truy cập này sẽ được chia đều cho mỗi biến thể thử nghiệm.

Nếu bạn nhập 30% làm đối tượng thì phần còn lại là 70% lượng khách truy cập vào Trang thông tin trên Cửa hàng Play sẽ thấy phiên bản hiện tại của trang.

Nếu bạn có 30% đối tượng và hai biến thể trong thử nghiệm của mình, mỗi biến thể sẽ được hiển thị cho 15% người dùng.

Trong quá trình thử nghiệm, mỗi người dùng sẽ chỉ thấy một biến thể duy nhất hoặc phiên bản hiện tại của trang.

Mức tác động tối thiểu có thể phát hiện được Cần có mức chênh lệch tối thiểu giữa các biến thể và đối tượng đối chứng để xác định phiên bản nào có hiệu suất cao hơn. Nếu mức chênh lệch đó nhỏ hơn mức tối thiểu này, các phiên bản thử nghiệm sẽ được xem là có hiệu suất như nhau.  
Mức độ tin cậy Tần suất mà khoảng tin cậy do thử nghiệm này đưa ra sẽ cho thấy hiệu suất thực của trang thông tin trên Cửa hàng Play.

Tăng mức độ tin cậy sẽ làm giảm khả năng có kết quả dương tính giả.

Lưu ý: Nếu bạn chọn mức tin cậy 90% cho thử nghiệm, thì một trong mười thử nghiệm có thể sẽ báo cáo kết quả dương tính giả

Thuộc tính

Chọn loại mục bạn muốn thử nghiệm so với trang thông tin hiện tại của mình.

Để chạy thử nghiệm hiệu quả nhất, hãy thử nghiệm mỗi lần một thuộc tính.

Bạn chỉ có thể thử nghiệm nội dung mô tả ngắn và nội dung mô tả đầy đủ trong thử nghiệm bản địa hoá.

Nếu bạn đang thử nghiệm nội dung đồ hoạ, hãy nhớ tuân theo yêu cầu về kích thước và loại tệp.


Nếu nhấp vào Chỉnh sửa giá trị ước tính khi nhập thông tin về mục tiêu thử nghiệm, thì bạn có thể chỉnh sửa giá trị ước tính hằng ngày trong danh sách bên dưới. Những giá trị ước tính này giúp dự tính khoảng thời gian diễn ra thử nghiệm. Những giá trị này có thể khác với hiệu suất ghi nhận được.

Trường Mô tả Ví dụ và mẹo
Số lượt truy cập hằng ngày của người dùng mới Ước tính số lượng khách truy cập trang thông tin trên Cửa hàng Play chưa từng cài đặt ứng dụng của bạn  
Tỷ lệ chuyển đổi Phần trăm ước tính số khách truy cập sẽ chuyển đổi thành chỉ số mục tiêu.

Ví dụ: nếu chỉ số mục tiêu của bạn là số người cài đặt lần đầu tiên, thì tỷ lệ chuyển đổi sẽ là tỷ lệ phần trăm ước tính số khách truy cập sẽ chuyển đổi thành số người cài đặt lần đầu tiên.

Số người cài đặt lần đầu tiên và chưa gỡ cài đặt hằng ngày

Số lượng người dùng ước tính sẽ lần đầu cài đặt ứng dụng của bạn và tiếp tục giữ ứng dụng đó sau một ngày

Truy cập Xem mô tả số liệu thống kê, chỉ số và ví dụ để tìm hiểu thêm.
Số người cài đặt lần đầu tiên hằng ngày

Số lượng người dùng ước tính sẽ truy cập trang thông tin của bạn trên Cửa hàng Play và lần đầu cài đặt.

Truy cập nội dung Xem mô tả số liệu thống kê, chỉ số và ví dụ để tìm hiểu thêm.

Bước 3: Xem lại và áp dụng kết quả

Để xem lại và áp dụng kết quả:

  1. Mở Play Console rồi chuyển đến trang Thử nghiệm trang thông tin cửa hàng (Phát triển > Sự hiện diện trong cửa hàng > Thử nghiệm trang thông tin cửa hàng).
  2. Chọn mũi tên phải trên hàng tương ứng với thử nghiệm bạn muốn xem lại. Hãy xem bảng Thử nghiệm trang thông tin trên Cửa hàng Play ở bên dưới để tìm hiểu thêm về cách thể hiện thông tin chi tiết.
  3. Trong mục "Kết quả", hãy xem phần tóm tắt kết quả thử nghiệm. Kết quả này dựa trên chỉ số mục tiêu của bạn.

    Kết quả sẽ cho bạn biết tuỳ chọn nào có hiệu suất tốt nhất hoặc có hiệu suất tốt hơn trang thông tin hiện tại trên Cửa hàng Play. Bạn cũng sẽ thấy phần giải thích về kết quả này dựa trên khoảng tin cậy và mức tác động tối thiểu có thể phát hiện được, cùng với đề xuất hành động (nếu có). Bạn có thể nhận được kết quả "Cần thêm dữ liệu" nếu hệ thống chưa thu thập đủ dữ liệu để trả kết quả.
     
  4. Hành động tiếp theo của bạn phụ thuộc vào kết quả thử nghiệm:
    • Nếu một biến thể hoạt động hiệu quả, bạn sẽ thấy đề xuất áp dụng biến thể đó.
    • Nếu bạn nhận được kết quả "Tiếp tục chạy thử nghiệm để thu thập thêm dữ liệu", hãy quay lại sau.
    • Nếu một số biến thể có hiệu suất tốt hơn Trang thông tin hiện tại trên Cửa hàng Play, hoặc nếu bạn nhận được kết quả "Ngang nhau", hãy xem lại kết quả để quyết định bạn muốn áp dụng biến thể nào. 
    • Nếu Trang thông tin hiện tại trên Cửa hàng Play có hiệu suất tốt nhất, hãy nhấp vào Giữ trang thông tin hiện tại.
Bảng thử nghiệm trang thông tin trên Cửa hàng Play

Sau khi thiết lập thử nghiệm, bạn sẽ thấy các thông tin sau đây trên trang Thử nghiệm trang thông tin trên Cửa hàng Play của mình. Thông tin chi tiết về thử nghiệm được trình bày trong 4 bảng, như được liệt kê dưới đây. Để biết thêm chi tiết, hãy chọn mũi tên phải trên hàng tương ứng của thử nghiệm bạn muốn xem.

Bản nháp

  • Tên thử nghiệm: Tên thử nghiệm của bạn
  • Trang thông tin trên Cửa hàng Play: Trang thông tin trên Cửa hàng Play nơi bạn chạy thử nghiệm
  • Loại thử nghiệm: Đồ hoạ mặc định hoặc bản địa hoá
  • Chi tiết: Số lượng biến thể được phân phối đến phần trăm người dùng mục tiêu

Đang diễn ra

  • Tên thử nghiệm: Tên thử nghiệm của bạn
  • Trang thông tin trên Cửa hàng Play: Trang thông tin trên Cửa hàng Play nơi bạn chạy thử nghiệm
  • Loại thử nghiệm: Đồ hoạ mặc định hoặc bản địa hoá
  • Ngày bắt đầu: Thời điểm bắt đầu thử nghiệm
  • Chi tiết: Số lượng biến thể được phân phối và tỷ lệ phần trăm người dùng

Ðã hoàn tất

  • Tên thử nghiệm: Tên thử nghiệm của bạn
  • Trang thông tin trên Cửa hàng Play: Trang thông tin trên Cửa hàng Play nơi bạn chạy thử nghiệm
  • Loại thử nghiệm: Đồ hoạ mặc định hoặc bản địa hoá
  • Ngày bắt đầu: Thời điểm bắt đầu thử nghiệm
  • Chi tiết: Số lượng biến thể được phân phối và tỷ lệ phần trăm người dùng
  • Kết quả: Kết quả thử nghiệm

Thử nghiệm trước đây

  • Tên thử nghiệm: Tên thử nghiệm của bạn
  • Trang thông tin trên Cửa hàng Play: Trang thông tin trên Cửa hàng Play nơi bạn chạy thử nghiệm
  • Loại thử nghiệm: Đồ hoạ mặc định hoặc bản địa hoá
  • Ngày bắt đầu: Thời điểm bắt đầu thử nghiệm
  • Ngày kết thúc: Thời điểm kết thúc thử nghiệm
  • Trạng thái: Áp dụng hoặc không áp dụng
Xem nội dung mô tả số liệu thống kê, chỉ số và ví dụ

Sau khi chọn một thử nghiệm, bạn có thể xem các chỉ số về hoạt động cài đặt và người dùng để nắm được thông tin tổng quan về hiệu suất của từng biến thể.

Chỉ số người dùng

Chỉ số Định nghĩa
Số người cài đặt lần đầu tiên

Số người dùng duy nhất đã cài đặt ứng dụng của bạn lần đầu tiên trong quá trình thử nghiệm. Dữ liệu được tính tỷ lệ để cho biết tỷ lệ phần trăm đối tượng.

Số người cài đặt chưa gỡ cài đặt (1 ngày)

Số người dùng riêng biệt đã cài đặt ứng dụng của bạn lần đầu tiên và giữ ứng dụng trong ít nhất 1 ngày sau khi cài đặt trong quá trình thử nghiệm. Dữ liệu được tính tỷ lệ để cho biết tỷ lệ phần trăm đối tượng.

Số lượt đăng ký trước vẫn duy trì – chỉ dành cho một số đối tác của Play Số lượng người dùng đã đăng ký trước và vẫn duy trì trạng thái đăng ký trước trong ít nhất 1 ngày.

Kết quả

Bạn có thể xem các chỉ số hiển thị kết quả thử nghiệm của mình theo hai cách khác nhau:

  • Hiện tại: Số người dùng duy nhất
  • Tính tỷ lệ: Số người dùng duy nhất chia cho tỷ lệ phần trăm đối tượng.

Nếu bạn muốn xem lại dữ liệu tuyệt đối về số người cài đặt, hãy sử dụng dữ liệu hiện tại. Nếu bạn muốn xem lại dữ liệu đã được tính tỷ lệ để biết các tỷ lệ phần trăm đối tượng khác nhau (ví dụ: Nếu 90% đối tượng xem một phiên bản và 10% đối tượng thấy một phiên bản khác), hãy sử dụng dữ liệu được tính tỷ lệ.

Mục Định nghĩa và ví dụ
Hiệu suất

Thay đổi ước tính về hiệu suất cài đặt so với phiên bản hiện tại. Hiệu suất sẽ chỉ xuất hiện khi thử nghiệm có đủ dữ liệu. Nói chung, vì thử nghiệm có nhiều thời gian hơn để chạy và thu thập dữ liệu nên phạm vi hiệu suất của biến thể sẽ hẹp hơn và chính xác hơn.

Ví dụ: Nếu một trong các biến thể có phạm vi hiệu suất từ +5% đến +15%, thay đổi sẽ nằm trong phạm vi hai giá trị này, và thay đổi có khả năng cao nhất về hiệu suất sẽ là một con số nằm giữa hai giá trị (khoảng +10%).

Số lượt cài đặt (chia theo tỷ lệ)
  • Số lượt cài đặt trong thời gian thử nghiệm chia cho tỷ lệ phần trăm đối tượng.
  • Có trong những thử nghiệm bắt đầu trước ngày 24 tháng 1 năm 2019.
  • Ví dụ: nếu bạn chạy một thử nghiệm với hai biến thể tương ứng với tỷ lệ đối tượng là 90%/10% và số lượt cài đặt cho mỗi biến thể là A = 900 và B = 200, thì số lượt cài đặt điều chỉnh theo tỷ lệ sẽ thể hiện là A = 1000 (900/0,9) and B = 2000 (200/0,1).
Số lượt cài đặt (hiện tại)
  • Số lượt cài đặt vẫn được duy trì đến hôm nay.
  • Có trong những thử nghiệm bắt đầu trước ngày 24 tháng 1 năm 2019.

Chỉ số cài đặt (không dùng nữa)

Các chỉ số sau đây được dùng cho các thử nghiệm bắt đầu trước ngày 24 tháng 1 năm 2019. Các thử nghiệm bắt đầu trước ngày này vẫn bao gồm những số liệu thống kê này, nhưng các thử nghiệm mới chỉ dùng chỉ số về số người cài đặt lần đầu tiên và số người cài đặt chưa gỡ cài đặt (1 ngày).

Chỉ số Định nghĩa và ví dụ
Số lượt cài đặt trên thiết bị đang hoạt động
  • Số lượng thiết bị đang hoạt động đã cài đặt mỗi biến thể ứng dụng, được tính theo tỷ lệ để bù cho các mức đối tượng khác nhau.
Số lượt cài đặt của người dùng
  • Số lượng người dùng duy nhất đã cài đặt mỗi biến thể ứng dụng trong một ngày cụ thể, được tính theo tỷ lệ để bù cho các mức đối tượng khác nhau.
Số lượt gỡ cài đặt của người dùng
  • Số lần gỡ cài đặt mỗi biến thể của ứng dụng trong một ngày cụ thể, được tính theo tỷ lệ để bù cho các tỷ lệ đối tượng người dùng khác nhau.

Những thử nghiệm sử dụng chỉ số không dùng nữa

Kể từ tháng 9 năm 2019, những thử nghiệm sử dụng các chỉ số không dùng nữa nêu trên sẽ tự động chấm dứt. Vui lòng lưu ý thông tin này khi lên kế hoạch và chuyển sang sử dụng các chỉ số mới nhất cho thử nghiệm trang thông tin trên Cửa hàng Play. 

Bạn có thể xem kết quả của các thử nghiệm đã chấm dứt trong phần Các thử nghiệm đã chấm dứt trên trang thử nghiệm Trang thông tin trên Cửa hàng Play.

Đăng ký nhận thông báo về thử nghiệm

Để nhận được thông báo và email khi thử nghiệm hoàn tất, hãy nhớ thiết lập tuỳ chọn ưu tiên trên trang Thông báo  trong Play Console. 

Để tìm hiểu thêm về thông báo qua email, hãy chuyển tới phần quản lý thông tin tài khoản nhà phát triển của bạn.

Thông tin này có hữu ích không?

Chúng tôi có thể cải thiện trang này bằng cách nào?

Bạn cần trợ giúp thêm?

Hãy thử các bước tiếp theo sau:

false
Tìm kiếm
Xóa nội dung tìm kiếm
Đóng tìm kiếm
Trình đơn chính
5314724236825162320
true
Tìm kiếm trong Trung tâm trợ giúp
true
true
true
true
true
92637
false
false