Testy A/B Firebase
Oparte na Google Optimize , Firebase A/B Testing pomaga zoptymalizować działanie aplikacji, ułatwiając przeprowadzanie, analizowanie i skalowanie eksperymentów produktowych i marketingowych. Daje Ci możliwość testowania zmian w interfejsie użytkownika, funkcjach lub kampaniach budujących zaangażowanie, aby sprawdzić, czy rzeczywiście przesuwają one igłę w zakresie Twoich kluczowych wskaźników (takich jak przychody i utrzymanie), zanim zaczniesz je szeroko wprowadzać.
Testowanie A/B współpracuje z FCM, dzięki czemu możesz testować różne komunikaty marketingowe, oraz ze zdalną konfiguracją, dzięki czemu możesz testować zmiany w swojej aplikacji.
Kluczowe możliwości
| Testuj i ulepszaj swoje wrażenia z produktu | Twórz eksperymenty za pomocą Zdalnej konfiguracji, aby wprowadzać zmiany w zachowaniu i wyglądzie swojej aplikacji w różnych wariantach eksperymentu, i przetestuj, który produkt najskuteczniej zapewnia wyniki, na których najbardziej Ci zależy. |
| Znajdź sposoby na ponowne zaangażowanie użytkowników, korzystając z kompozytora powiadomień | Skorzystaj z testów A/B, aby znaleźć najskuteczniejsze ustawienia sformułowań i wiadomości, które przyciągną użytkowników do Twojej aplikacji. |
| Bezpiecznie wdrażaj nowe funkcje | Nie wprowadzaj nowej funkcji bez upewnienia się, że spełnia ona Twoje cele dla mniejszej podgrupy użytkowników. Gdy będziesz mieć pewność co do wyników testów A/B, udostępnij tę funkcję wszystkim użytkownikom. |
| Docelowe grupy użytkowników z danymi Google Analytics | Przeprowadzaj testy A/B na docelowych klientach, korzystając z danych Google Analytics. Możesz na przykład kierować reklamy na podzbiór użytkowników korzystających z określonej wersji aplikacji, platformy, języka i grupy demograficznej, które pasują do określonej usługi użytkownika Google Analytics . |
Jak to działa?
Tworząc eksperyment, testujesz co najmniej jeden wariant testowalnego działania i mierzysz skuteczność wariantów w realizacji celu, który chcesz osiągnąć (np. zwiększenie zakupów w aplikacji). Docelową grupę użytkowników można zdefiniować za pomocą wielu kryteriów połączonych logiką „ORAZ”; na przykład możesz ograniczyć grupę do użytkowników określonej wersji aplikacji, którzy należą zarówno do grupy odbiorców Analytics, jak np. „użytkownicy, którzy ulegają awarii”, które odpowiadają niestandardowej usłudze użytkownika Google Analytics ustawionej przez klienta.
Dzięki zdalnej konfiguracji możesz eksperymentować ze zmianami kilku parametrów w wielu wariantach, aby zmienić zachowanie i wygląd aplikacji na różne sposoby w każdej grupie wariantów. Możesz użyć tego do subtelnych zmian, takich jak majsterkowanie przy najlepszym schemacie kolorów i pozycjonowaniu opcji menu, lub do znaczących zmian, takich jak testowanie zupełnie nowej funkcji lub projektu interfejsu użytkownika. Dzięki kompozytorowi powiadomień możesz eksperymentować, aby znaleźć właściwe sformułowanie wiadomości z powiadomieniem.
Niezależnie od tego, czy w eksperymencie używany jest Zdalna konfiguracja, czy kompozytor Powiadomień, możesz monitorować eksperyment, aż uzyskasz prawidłowy zestaw wyników, a następnie zidentyfikować lidera , wariant, który najlepiej spełni Twój cel. Eksperyment można rozpocząć od niewielkiej części bazy użytkowników, a następnie z czasem ten odsetek zwiększać. Jeśli w pierwszym eksperymencie nie zostanie ujawniony wariant, który spełnia Twoje cele lepiej niż obecnie, możesz rozpocząć nową rundę eksperymentów, aby znaleźć najlepszy sposób na ulepszenie swojej aplikacji.
Możesz także śledzić inne dane (awarie aplikacji, utrzymanie i zaangażowanie) wraz z celem, aby lepiej zrozumieć wynik eksperymentu i jego wpływ na korzystanie z aplikacji.
Ścieżka wdrożenia
| Dodaj Zdalną konfigurację lub Firebase Cloud Messaging do swojej aplikacji | Jeśli Twoja aplikacja korzysta już ze Zdalnej konfiguracji lub Komunikacji w chmurze (lub obu), możesz przejść do następnego kroku. | |
| Zdefiniuj warianty, które chcesz ocenić za pomocą testu A/B. | Niezależnie od tego, czy zmiana jest subtelna, czy dodanie nowego interfejsu użytkownika lub funkcji, jeśli możesz kontrolować tę zmianę za pomocą zdalnej konfiguracji, możesz przetestować wiele wariantów tej zmiany za pomocą testów A/B. Możesz również użyć Testów A/B z edytorem powiadomień, aby przetestować wiele wariantów kampanii ponownego zaangażowania, zanim udostępnisz ją wszystkim użytkownikom. | |
| Określ, jak będziesz mierzyć sukces | W przypadku eksperymentu, w którym używany jest układacz powiadomień, można użyć zdarzenia Analytics do zdefiniowania celu eksperymentu i porównania wariantów eksperymentu. W przypadku eksperymentu ze Zdalną konfiguracją możesz użyć zdarzenia Analytics lub ścieżki konwersji do zdefiniowania celu eksperymentu. | |
| Monitoruj swój eksperyment, aby znaleźć zwycięski wariant | Możesz rozpocząć eksperyment z kilkoma użytkownikami, a następnie wdrożyć go dla większej liczby użytkowników, jeśli wczesne wyniki będą dobrze wyglądać. Monitorując eksperyment, zobaczysz, czy niektóre warianty powodują więcej awarii aplikacji lub inny wpływ na wrażenia z aplikacji, a także możesz zobaczyć, który wariant osiąga największe postępy w realizacji celu. |
Następne kroki
- Zapoznaj się z serią filmów poświęconych testom A/B , która obejmuje wszystko, od podstaw po zaawansowane tematy.
- Zacznij tworzyć eksperymenty dla zdalnej konfiguracji lub kompozytora powiadomień .
- Dowiedz się więcej o funkcjach Firebase, które współdziałają z Testami A/B: Google Analytics , Zdalna konfiguracja Firebase , Powiadomienia , AdMob i personalizacja Zdalnej konfiguracji .
- Dowiedz się więcej o Optymalizacji , która korzysta z tych samych zaawansowanych statystyk Bayesa, które są używane w testach A/B.