Firebase A/B 測試

Firebase A/B 測試可簡化您執行、分析及擴充產品與行銷實驗的方式,協助您最佳化應用程式體驗。透過這項功能,您可以測試對應用程式 UI、功能或參與度廣告活動所做的變更,在公開發布前瞭解這些變更對重要指標 (例如收益和留存率) 有何影響。

A/B 測試可與 FCM 搭配使用,方便您測試不同的行銷訊息和遠端設定,方便您測試應用程式中的變更。

建立遠端設定實驗 建立訊息實驗

主要功能

測試及改善產品體驗 使用遠端設定建立實驗,即可變更各變化版本的應用程式行為和外觀,並測試何種產品體驗最能創造您最重視的結果。
使用通知編輯器,找出重新吸引使用者的方法 進行 A/B 測試可協助您找出最有效的用詞和訊息設定,將使用者帶入應用程式。
安全地推出新功能 如要推出新功能,請先確定只有一小部分使用者能達成目標,再推出新功能。確認 A/B 測試結果有信心後,即可向所有使用者推出這項功能。
目標使用者群組 使用應用程式使用者的相關資料,執行指定目標 A/B 版本測試。舉例來說,您可以指定一部分執行特定應用程式版本、平台或語言的使用者,或是選取符合 Google Analytics (分析) 使用者屬性值的使用者。

運作原理

建立實驗時,請建立使用者體驗的多個變化版本,並評估變化版本在達成您要達成的目標 (例如提升應用程式內購成效) 上的成效。指定使用者群組可透過以「AND」邏輯串連的多個條件定義;舉例來說,您可以將群組限制為屬於某個 Analytics (分析) 目標對象的使用者,例如「當機的使用者」,且符合用戶端設定的自訂 Google Analytics (分析) 使用者屬性。

AB 測試實驗會使用 Google Analytics (分析) 來測試遠端設定和訊息傳遞動作,藉此鎖定使用者並評估成效。

透過遠端設定,您可以對一或多個參數進行變更,藉此改變應用程式的行為和外觀。您可以藉此進行細微的變更,例如微調最佳色彩配置和選單選項的位置,或是進行更重大的變更,例如測試全新的功能或 UI 設計。使用通知編輯器,您可以進行實驗,找出通知訊息適用的正確措辭。

無論實驗使用遠端設定或通知編輯器,您都可以持續監控實驗,直到找出最符合目標的勝出版本為止。您可以先對一小部分的使用者族群進行實驗,並隨著時間提高這個比例。如果第一項實驗並未發現可達成目標的變化版本優於基準版本,您可以開始新的實驗,找出改善應用程式的最佳方式。

您也可以追蹤其他指標 (應用程式當機、留存率和收益) 以及目標,以便進一步瞭解實驗結果,以及實驗結果對應用程式使用體驗的影響。

實作路徑

在應用程式中加入遠端設定或 Firebase 雲端通訊 如果您的應用程式已使用遠端設定和/或雲端通訊功能 (或兩者皆使用),可直接跳到下一個步驟。
定義您要透過 A/B 版本測試評估的變化版本。 無論是細微變更,或是新增新的 UI 或功能,如果您能利用遠端設定來控制這項變更,都能利用 A/B 測試功能,對該變更測試多個變化版本。

您也能先使用通知編輯器執行 A/B 測試,在再參與式廣告活動中測試多種變化版本,再向所有使用者推出。
定義評估成效的方式 如果在實驗中使用通知編輯器,您可以使用 Analytics (分析) 事件定義實驗目標並比較實驗變化版本。進行遠端設定實驗時,您可以使用 Analytics (分析) 事件或轉換漏斗來定義實驗目標。
監控實驗以找出勝出的變化版本 您可以先邀請少數使用者進行實驗,如果初期結果看起來不錯,再向更多使用者推出實驗。監控實驗時,您可以查看某些變化版本是否造成應用程式當機或對應用程式體驗受到其他影響,以及哪個變化版本最能達成您的目標。

後續步驟