Catch up on everthing we announced at this year's Firebase Summit. Learn more

Firebase A/B-Tests

Angetrieben durch Google optimiert , Firebase A / B - Tests können Sie Ihre App - Erfahrung zu optimieren , indem es einfach zu laufen, analysieren und Experimente Produkt- und Marketing - Skala. Es gibt Ihnen die Möglichkeit, Änderungen an der Benutzeroberfläche, Funktionen oder Interaktionskampagnen Ihrer App zu testen, um zu sehen, ob sie tatsächlich die Nadel bei Ihren Schlüsselkennzahlen (wie Umsatz und Kundenbindung) bewegen, bevor Sie sie weit verbreiten.

A/B-Tests arbeiten mit FCM, damit Sie verschiedene Marketingbotschaften testen können, und mit Remote Config, damit Sie Änderungen in Ihrer App testen können.

Erstellen Sie Remote - Config Experimente erstellen Messaging - Experimente

Schlüsselfähigkeiten

Testen und verbessern Sie Ihr Produkterlebnis Erstellen Sie Experimente mit Remote Config, um das Verhalten und die Darstellung Ihrer App für alle Varianten in Ihrem Experiment zu ändern, und testen Sie, welche Produkterfahrung am effektivsten zu den Ergebnissen führt, die Ihnen am wichtigsten sind.
Finden Sie mit dem Benachrichtigungs-Composer Möglichkeiten, Ihre Benutzer erneut zu motivieren Verwenden Sie A/B-Tests, um die effektivsten Formulierungs- und Messaging-Einstellungen zu finden, um Benutzer in Ihre App zu bringen.
Neue Funktionen sicher einführen Führen Sie keine neue Funktion ein, ohne zuvor sicherzustellen, dass sie Ihre Ziele mit einer kleineren Untergruppe von Benutzern erreicht. Sobald Sie sich auf Ihre A/B-Testergebnisse verlassen haben, stellen Sie die Funktion allen Ihren Benutzern zur Verfügung.
Zielen Sie auf "vorhergesagte" Benutzergruppen ab Mit Firebase Predictions können Sie A/B-Tests für Nutzer durchführen, von denen vorhergesagt wird, dass sie eine bestimmte Aktion ausführen, sei es, um Geld auszugeben (oder nicht), Ihre App zu verlassen oder ein anderes Conversion-Ereignis durchzuführen, das Sie mit Analytics definiert haben .

Wie funktioniert es?

Wenn Sie einen Test erstellen, testen Sie eine oder mehrere Varianten einer testbaren Aktion und messen, wie gut die Varianten in Bezug auf ein Ziel abschneiden, das Sie erreichen möchten (z. B. die Steigerung von In-App-Käufen). Ihre gezielte Benutzergruppe kann durch mehrere Kriterien definiert werden, die mit "UND"-Logik verkettet sind; Sie können die Gruppe beispielsweise auf Nutzer einer bestimmten App-Version beschränken, die sowohl zu einer Analytics-Zielgruppe wie "Abstürzende Nutzer" gehören, als auch zu einer Gruppe, die automatisch von Firebase Predictions basierend auf ihrer Abwanderungswahrscheinlichkeit erstellt wurde.

Mit Remote Config können Sie mit Änderungen an mehreren Parametern in mehreren Varianten experimentieren, um das Verhalten und die Darstellung Ihrer App in jeder Variantengruppe auf verschiedene Weise zu ändern. Sie können dies für subtile Änderungen wie das Basteln am besten Farbschema und die Positionierung von Menüoptionen oder für wesentliche Änderungen wie das Testen einer völlig neuen Funktion oder eines UI-Designs verwenden. Mit dem Benachrichtigungs-Composer können Sie experimentieren, um den richtigen Wortlaut für eine Benachrichtigungsnachricht zu finden.

Ob Ihr Experiment Remote - Config oder die Benachrichtigungen Komponisten verwendet, können Sie Ihr Experiment überwachen , bis Sie einen gültigen Satz von Ergebnissen, und dann den Anführer identifizieren, die Variante, die am besten Ihr Ziel erreicht. Sie können Ihr Experiment mit einem kleinen Prozentsatz Ihrer Nutzerbasis beginnen und diesen Prozentsatz dann im Laufe der Zeit erhöhen. Wenn Ihr erster Test keine Variante zeigt, die Ihr Ziel besser erfüllt als Ihre App derzeit, können Sie eine neue Experimentierrunde starten, um die beste Möglichkeit zur Verbesserung Ihrer App zu finden.

Sie können auch andere Messwerte (App-Abstürze, Bindung und Interaktion) zusammen mit Ihrem Ziel verfolgen, damit Sie das Ergebnis Ihres Tests und dessen Auswirkungen auf die Nutzung Ihrer App besser verstehen.

Implementierungspfad

Remote Config oder Firebase Cloud Messaging zu Ihrer App hinzufügen Wenn Ihre App bereits Remote Config oder Cloud Messaging (oder beides) verwendet, können Sie mit dem nächsten Schritt fortfahren.
Definieren Sie die Varianten, die Sie mit einem A/B-Test auswerten möchten. Unabhängig davon, ob Ihre Änderung subtil ist oder eine neue Benutzeroberfläche oder Funktion hinzugefügt wird, können Sie mit A/B-Tests mehrere Varianten dieser Änderung testen, wenn Sie diese Änderung mit Remote Config steuern können.

Sie können auch A/B-Tests mit dem Notifications Composer verwenden, um mehrere Varianten Ihrer Re-Engagement-Kampagne zu testen, bevor Sie sie für alle Benutzer bereitstellen.
Definieren Sie, wie Sie den Erfolg messen Bei einem Test, der den Notifications Composer verwendet, können Sie mithilfe eines Analytics-Ereignisses das Ziel Ihres Tests definieren und Testvarianten vergleichen. Bei einem Remote Config-Test können Sie entweder ein Analytics-Ereignis oder einen Conversion-Trichter verwenden, um das Ziel Ihres Tests zu definieren.
Überwachen Sie Ihr Experiment, um die Gewinnervariante zu finden Sie können Ihr Experiment mit nur wenigen Benutzern beginnen und es dann auf mehr Benutzer verteilen, wenn die ersten Ergebnisse gut aussehen. Während Sie Ihren Test überwachen, sehen Sie, ob einige Varianten mehr App-Abstürze oder andere Auswirkungen auf die App-Erfahrung verursachen, und Sie können auch sehen, welche Variante Ihrem Ziel am meisten näher kommt.

Nächste Schritte