為您的商店資訊執行 A/B 測試

為了讓開發人員掌有更大控制權,並可存取更詳盡的統計資料,我們最近對「Play 管理中心」的商店資訊實驗作出了一些變更。我們已新增三項功能:

  • 實驗參數設定;
  • 用於估計所需樣本和完成時間的計算機;以及
  • 可供持續監察的置信區間。 

本頁面已因應上述變更作出更新。 

本頁所述的功能尚未向所有開發人員提供。

您可以進行實驗,為您的應用程式找出最有效的圖像和本地化文字,以協助優化 Google Play 上的商店資訊。您可以為主要和自訂商店資訊頁面進行實驗。

就已發佈應用程式而言,您可以將各個版本的安裝資料與目前的版本作比較,從而找出成效最佳的版本。在設定測試前,請查看執行有效實驗的最佳策略。

注意:全球實驗已重新命名為預設圖像實驗。它們的功能與重新命名前相同。

實驗類型

您可以就每個應用程式進行一個預訂圖像實驗,或同時進行最多五個本地化實驗。

預設圖像

使用預設圖像實驗時,您可以用應用程式的預設商店資訊語言來進行圖像實驗。您可以包含不同版本的應用程式圖示、主題圖片、螢幕擷取畫面和宣傳影片。

  • 如果您只以一種語言提供應用程式商店資訊:預設圖像實驗將向所有使用者顯示。
  • 如果您曾以特定語言新增任何本地化圖像資產:以該語言檢視應用程式的使用者將不會看到應用程式預設圖像實驗。例如,如果您應用程式的預設語言為英文,而其中法文版本包含了本地化主題圖片,那麼法文版本應用程式的使用者將看不到實驗 (即使您正在測試圖示)。
本地化 (文字和圖像)

您可以透過本地化實驗,對最多五種語言的應用程式圖示、主題圖片、螢幕擷取畫面、宣傳影片及/或應用程式描述進行實驗。瀏覽您所選語言版本之應用程式商店資訊的使用者,才會看到實驗版本。

如果您應用程式的商店資訊只提供一種語言,本地化實驗只會向預設語言版本應用程式的使用者顯示。

第 1 步:建立實驗

如何在「Play 管理中心」建立實驗:

  1. 開啟「Play 管理中心」並前往「商店資訊實驗」頁面 (按一下 [拓展] > [商店上的內容] > [商店資訊實驗])。
  2. 按一下 [建立實驗]。
  3. 輸入實驗詳情:
    • 實驗名稱:輸入實驗的名稱 (50 個字元或以下)。
    • 商店資訊:選取要進行實驗的商店資訊。
    • 實驗類型:選擇 [預設圖像實驗] 或 [本地化實驗]
  4. 按一下 [下一步]。
  5. 按照「第 2 步:設定實驗」的指示執行。

第 2 步:設定實驗

建立實驗後,您可以選擇要測試的商店資訊、版本以及屬性。

如何設定實驗:

  1. 按照螢幕指示選取商店資訊並加入實驗目標,例如目標數據、實驗目標對象、不同版本和其他設定。
  2. 如要開始實驗,請前往頁面頂部並按一下 [執行實驗]。
  3. 如要稍後完成實驗設定,請按一下 [儲存]
查看欄位說明、範例和提示

設定實驗時,您必須提供下列商店資訊資料。

欄位 說明 範例和提示
實驗名稱

實驗名稱只會在「Play 管理中心」上顯示以供識別,該名稱並不會向使用者顯示。

  • 「鮮明圖示實驗」
  • 「標誌主題圖片」
  • 「新口號的簡短描述」
商店資訊 您要測試的 (主要或自訂) 商店資訊。

開始實驗後,自訂商店資訊的名稱將會與實驗開始時使用的名稱一樣。如果在實驗開始後更新自訂商店資訊的名稱,實驗的名稱將不會變更。

為了避免在進行實驗時產生混淆,建議先刪除未使用的自訂商店資訊,然後在需要時建立新商店資訊。


設定實驗時,您必須提供下列實驗目標資料。這些設定會影響實驗的準確度,以及達到目標所需的安裝人數。

欄位 說明 範例和提示
目標數據 將用於評定實驗結果的數據。

有兩種方法:

  • 保留應用程式的首次安裝者 (建議):首次安裝應用程式並保留應用程式最少 1 天的使用者人數
  • 首次安裝者:首次安裝應用程式的使用者人數 (不論有否保留應用程式)
不同版本 測試中與目前商店資訊比較的實驗變化版本數量。測試單一變化版本需要的實驗時間較少。

如要在實驗中加入新版本,請從「不同版本」下拉式選單中選取其他選項。

除了目前版本外,您還可以為每個實驗加入最多三個版本。

實驗目標對象

將會看到實驗版本而非目前商店資訊的商店資訊訪客百分比。

有關訪客人數將在您的各實驗版本之間平分。

如果您在目標對象中輸入 30%,您「商店資訊」頁面的其餘 70% 訪客將看到您頁面的目前版本。

如果您輸入 30% 目標對象及兩個實驗版本,每個版本將會向 15% 使用者顯示。

在實驗過程中,每位使用者只會看到一個版本或您頁面的目前版本。

最小可檢測效果 判別實驗版本和對照組成效優劣所需的差別下限。如果差別低於此下限,您的實驗則將會視為無分優劣。  
置信水平 實驗的置信區間含有商店資訊實際成效的頻率。

置信水平愈高,誤測的機會愈低。

注意:為實驗選擇 90% 置信水平,即表示每十個實驗中可能有一個出現誤測。

屬性

選取您想與目前資訊進行比較測試的項目類型。

如要更有效進行實驗,每次請只測試一個屬性。

您只能在本地化實驗中測試簡短描述及完整描述。

如果您要測試圖像資產,請確保圖像符合尺寸和檔案類型要求


如在輸入實驗目標資料時按一下 [編輯預測值],即可編輯下列的預計每日數值。這些數值可助您計算實驗所需時間。這些值與觀察到的成效可能有所不同。

欄位 說明 範例和提示
新使用者的每日瀏覽人數 未曾安裝過您應用程式的商店資訊訪客預計人數  
轉換率 會轉換成目標數據的訪客預計百分比。

舉例來說,如果目標數據是首次安裝者,則轉換率將會是轉換為首次安裝者的預計訪客百分比。

每日保留應用程式的首次安裝者

首次安裝且未在一天後解除安裝應用程式的使用者預計人數

詳情請參閱「查看統計資料、數據和例子的描述」。
每日首次安裝者

瀏覽商店資訊且首次安裝的使用者預計人數。

詳情請參閱「查看統計資料、數據和例子的描述」。

第 3 步:查看並套用結果

如何查看並套用結果:

  1. 開啟「Play 管理中心」並前往「商店資訊實驗」頁面 (按一下 [拓展] > [商店上的內容] > [商店資訊實驗])。
  2. 找出要查看的實驗,然後選取該實驗表列上的向右箭咀。請參閱下文的商店資訊實驗表,進一步瞭解顯示詳情的方式。
  3. 在「結果」部分中查看實驗結果摘要。這些結果是根據目標數據作出的。

    結果顯示哪個選項的成效最佳,或優勝於目前的商店資訊。系統亦會根據置信區間和最小可檢測效果說明這個結果,並建議可採取的行動 (如適用)。如果收集的資料不足以傳回結果,您可能收到「需要更多資料」的結果。
     
  4. 下一項操作視乎實驗結果而定: 
    • 如有版本的成效良好,系統可能會建議套用該版本。
    • 如果結果是「請繼續執行實驗,以便收集更多資料」,請稍後回來查看。
    • 如多個不同版本的成效優勝於您的商店資訊,或結果是「無分優劣」,請查看結果以決定要套用的版本。 
    • 如果目前商店資訊的成效最佳,應按一下 [保留目前的商店資訊]
商店資訊實驗表

設定實驗後,即可在「商店資訊實驗」頁面查看以下詳細資料。實驗詳細資料分別列於以下四個圖表中。如需瞭解詳情,請找出要查看的實驗,然後選取該實驗表列上的向右箭咀。

草稿

  • 實驗名稱:實驗的名稱
  • 商店資訊:進行實驗的商店資訊
  • 實驗類型:預設或本地化圖像
  • 詳細資料:提供的不同版本數量相對於目標使用者百分比

進行中

  • 實驗名稱:實驗的名稱
  • 商店資訊:進行實驗的商店資訊
  • 實驗類型:預設或本地化圖像
  • 開始日期:實驗開始的日期
  • 詳細資料:提供的不同版本數量和使用者百分比

已完成

  • 實驗名稱:實驗的名稱
  • 商店資訊:進行實驗的商店資訊
  • 實驗類型:預設或本地化圖像
  • 開始日期:實驗開始的日期
  • 詳細資料:提供的不同版本數量和使用者百分比
  • 結果:實驗的結果

過往的實驗

  • 實驗名稱:實驗的名稱
  • 商店資訊:進行實驗的商店資訊
  • 實驗類型:預設或本地化圖像
  • 開始日期:實驗開始的日期
  • 結束日期:實驗結束的日期
  • 狀態:已套用或未套用
查看統計資料、數據和例子的描述

選擇實驗後,您可以查看與每個版本成效相關的使用者和安裝數據。

使用者數據

數據 定義
首次安裝人數

於實驗中首次安裝您應用程式的不重複使用者。資料已按目標對象分額調整。

保留應用程式的安裝者人數 (1 天)

於實驗中首次安裝您應用程式且保留至少 1 天的不重複使用者人數。資料已按目標對象分額調整。

保留預先登記 – 只適用於特定 Play 合作夥伴 已預先登記且維持該狀態最少 1 日的使用者人數。

結果

您可以透過以下兩種方式查看實驗結果的數據:

  • 目前:不重複使用者的數目
  • 經調整:已按目標對象分額調整的使用者數目

如要查看安裝人數的絕對資料,請使用目前資料。如要查看已按不同目標對象分額調整的資料 (例如顯示 9 成的目標對象使用一個版本,而 1 成的目標對象使用其他版本),請使用經調整的資料。

項目 定義和範例
成效

安裝成效的預期變更 (與目前的版本相比)。當您的實驗收集足夠資料時,系統才會顯示成效。一般來說,進行實驗和收集資料的時間愈長,版本成效範圍便會收窄,結果亦會更準確。

範例:如果其中一個版本的成效範圍為 +5% 至 +15%,而變更介乎兩個值之間,則成效變更最可能是兩個數字之間的中間數,即大約 +10%。

安裝人數 (經調整)
  • 實驗期間安裝人數,除以目標對象分額。
  • 包括在 2019 年 1 月 24 日之前開始的實驗。
  • 例如,如果您的兩個實驗版本使用 90%/10% 目標對象分額,而每個版本的安裝人數為 A = 900 和 B = 200,經調整的安裝人數將顯示為 A = 1000 (900/0.9) 和 B = 2000 (200/0.1)。
安裝人數 (目前)
  • 安裝應用程式後,至今仍未解除安裝的使用者人數。
  • 包括在 2019 年 1 月 24 日之前開始的實驗。

安裝數據 (已過時)

以下數據用於在 2019 年 1 月 24 日之前開始的實驗。在此日期前開始的實驗仍會包括這些統計數據,但新實驗只使用首次安裝和保留應用程式 (1 日) 使用者人數的數據。

數據 定義和範例
常用裝置的安裝次數
  • 目前安裝了各應用程式版本的常用裝置數量 (已因應不同目標對象級別上調)。
使用者安裝次數
  • 在指定的一天中,這個應用程式每個版本的不重複安裝使用者人數,已因應不同的目前對象級別向上調整。
使用者解除安裝次數
  • 在指定的一天中,這個應用程式每個版本的解除安裝人數,已因應不同的目標對象級別向上調整。

使用已過時數據的實驗

截至 2019 年 9 月,使用任何上述已停用數據的實驗將會自動終止。請在計劃時考慮此因素,並在商店資訊實驗中改用最新數據。

您可以在「商店資訊」實驗頁面上「已終止實驗」下查看已終止實驗的結果。

訂閱實驗通知

如果您希望在實驗完成時接收通知和電郵,請務必在「Play 管理中心」的「通知頁面設定偏好。

如要進一步瞭解電郵通知功能,請參閱管理您開發人員帳戶的資訊

此內容對您有幫助嗎?

我們可以如何改善?

需要更多協助?

嘗試以下步驟:

false
搜尋
清除搜尋
閂搜尋模式
主選單
757778645496848098
true
搜尋說明中心
true
true
true
true
true
92637
false
false