Firebase A/B 測試

Firebase A/B 測試透過簡化運行、分析和擴展產品和行銷實驗的方式來幫助您優化應用體驗。它使您能夠在廣泛推廣之前測試對應用程式的 UI、功能或參與活動的更改,以了解它們如何影響您的關鍵指標(例如收入和保留率)。

A/B 測試與 FCM 搭配使用,以便您可以測試不同的行銷訊息,並與遠端設定配合使用,以便您可以測試應用程式內的變更。

建立遠端配置實驗建立訊息傳遞實驗

關鍵能力

測試並改善您的產品體驗使用遠端配置建立實驗,以在實驗中的各個變體中更改應用程式的行為和外觀,並測試哪種產品體驗最能有效地推動您最關心的結果。
使用通知編輯器找到重新吸引使用者的方法使用 A/B 測試可協助您找到最有效的措辭和訊息設置,以吸引用戶進入您的應用程式。
安全地推出新功能在未確保新功能能夠滿足較小使用者群體的目標之前,請勿推出新功能。一旦您對 A/B 測試結果充滿信心,您就可以向所有用戶推出功能。
目標用戶群使用有關應用程式使用者的資料執行有針對性的 A/B 測試。例如,您可以定位執行特定應用程式版本、平台、語言的使用者子集,或選擇與 Google Analytics使用者屬性值相符的使用者。

它是如何運作的?

在創建實驗時,創建用戶體驗的多個變體,並衡量這些變體在實現您想要實現的目標(例如增加應用程式內購買)方面的表現。您的目標使用者群組可以透過以「AND」邏輯連結的多個標準來定義;例如,您可以將群組限制為屬於 Analytics 受眾群體的特定應用程式版本的用戶,例如與用戶端設定的自訂 Google Analytics 用戶屬性相符的「崩潰用戶」。

AB 測試實驗使用 Google Analytics 來測試遠端配置和訊息傳遞操作,以定位使用者並衡量結果。

透過遠端配置,您可以嘗試變更一個或多個參數,以改變應用程式的行為和外觀。您可以使用它來進行細微的更改,例如修改最佳配色方案和選單選項的位置,或進行更重大的更改,例如測試全新的功能或 UI 設計。使用通知編輯器,您可以嘗試為通知訊息找到正確的措詞。

無論您的實驗使用遠端配置還是通知編輯器,您都可以監控您的實驗,直到確定領導者(最能實現您目標的變體)。您可以從一小部分用戶群開始進行實驗,並隨著時間的推移增加該百分比。如果您的第一個實驗沒有發現比基線更好地實現您的目標的變體,您可以開始新一輪的實驗,以找到改進應用程式的最佳方法。

您還可以追蹤其他指標(應用程式崩潰、留存率和收入)以及您的目標,以便您可以更好地了解實驗結果以及它如何影響應用程式的使用體驗。

實施路徑

將遠端配置或 Firebase 雲端訊息傳遞新增至您的應用如果您的應用程式已使用遠端設定或雲端訊息傳遞(或兩者),您可以跳到下一步。
定義要透過 A/B 測試評估的變體。無論您的更改是細微的還是添加新的 UI 或功能,如果您可以使用遠端配置控制該更改,則可以使用 A/B 測試來測試該更改的多個變體。

您也可以將 A/B 測試與通知編輯器結合使用,在向所有使用者推出重新參與活動之前測試其多個變體。
定義如何衡量成功透過使用通知編輯器的實驗,您可以使用 Analytics 事件來定義實驗目標並比較實驗變體。透過遠端配置實驗,您可以使用 Analytics 事件或轉換管道來定義實驗的目標。
監控您的實驗以找到獲勝的變體您可以僅在少數用戶中開始實驗,如果早期結果看起來不錯,則可以將其推廣給更多用戶。在監控實驗時,您將了解某些變體是否會導致更多應用程式崩潰或對應用程式體驗產生其他影響,並且您還可以看到哪個變體在實現您的目標方面取得了最大進展。

下一步