Eksportowanie danych z Crashlytics do BigQuery

Możesz wyeksportować swoje Firebase Crashlytics dane do BigQuery. Gdy dane znajdą się w BigQuery, możesz analizować je za pomocą zapytań SQL, tworzyć wizualizacje danych i niestandardowe panele, a nawet eksportować dane do innych usług.

Na tej stronie dowiesz się, jak skonfigurować eksportowanie danych o sesjach Crashlytics i (opcjonalnie) Firebase do BigQuery.

Konfigurowanie eksportu do BigQuery

  1. W konsoli Firebase otwórz stronę Ustawienia > Integracje.

  2. Na karcie BigQuery kliknij Połącz.

  3. Postępuj zgodnie z instrukcjami wyświetlanymi na ekranie, aby skonfigurować eksport do BigQuery, w tym te opcje:

Odłączenie od BigQuery powoduje zakończenie wypełniania odpowiednich zbiorów danych w BigQuery.

Pamiętaj:

  • Wszystkie dane wyeksportowane już do usługi BigQuery będą przechowywane przez dozwolony czas retencji, a opłaty za przechowywanie i wykonywanie zapytań mogą być nadal naliczane. Aby uniknąć dalszych opłat, możesz ręcznie usunąć zbiory danych.

  • Jeśli masz dane BigQuery przechowywane w innych usługach, mogą one podlegać innym warunkom dotyczącym trwałości danych.

Usługę BigQuery możesz odłączyć na poziomie projektu w Firebase, na poziomie produktu lub na poziomie aplikacji w ramach konkretnego produktu.

Aby odłączyć konto od BigQuery:

  1. W konsoli Firebase otwórz Ustawienia > kartę Integracje.

  2. Na karcie BigQuery kliknij Zarządzaj.

  3. Możesz odłączyć konkretną usługę lub konkretne aplikacje w ramach danej usługi.

    Aby całkowicie odłączyć projekt w Firebase, znajdź przycisk u dołu strony.

  4. Gdy pojawi się komunikat, potwierdź, że chcesz zatrzymać eksportowanie.


Co się stanie, gdy włączysz eksportowanie?

  • Firebase eksportuje dane z aplikacji połączonych z BigQuery.

    • Podczas konfiguracji domyślnie wszystkie aplikacje w projekcie są połączone z BigQuery, ale możesz wybrać, aby nie łączyć konkretnych aplikacji podczas konfiguracji.

    • Wszystkie aplikacje, które dodasz później do projektu w Firebase, zostaną automatycznie połączone z BigQuery.

    • W każdej chwili możesz określić, które aplikacje mają eksportować dane.

  • Firebase eksportuje dane do lokalizacji zbioru danych wybranej podczas konfiguracji.

    • Ta lokalizacja dotyczy zarówno zbioru danych Crashlytics, jak i zbioru danych sesji Firebase (jeśli eksportowanie danych o sesjach jest włączone).

    • Ta lokalizacja ma zastosowanie tylko do danych eksportowanych do BigQuery i nie wpływa na lokalizację danych przechowywanych do użytku w panelu Crashlytics w konsoli Firebase ani w Android Studio.

    • Po utworzeniu zbioru danych nie można zmienić jego lokalizacji. Możesz natomiast skopiować zbiór danych do innej lokalizacji lub go ręcznie przenieść przez ponowne utworzenie tego zbioru w innej lokalizacji. Więcej informacji znajdziesz w artykule Zmiana lokalizacji istniejących eksportów.

  • Firebase konfiguruje codzienne synchronizacje danych zbiorczych z BigQuery.

    • Po połączeniu z BigQuery eksport początkowej partii danych może potrwać do 48 godzin.

    • Codzienna synchronizacja odbywa się raz dziennie, niezależnie od zaplanowanego eksportu, który możesz skonfigurować w BigQuery. Pamiętaj, że czas i długość trwania zadania synchronizacji mogą się zmieniać, dlatego nie zalecamy planowania operacji ani zadań podrzędnych na podstawie konkretnego czasu eksportu.

  • Firebaseeksportuje kopię Twoich dotychczasowych danych do BigQuery.

    • W przypadku każdej połączonej aplikacji eksport zawiera tabelę pakietową z danymi z codziennej synchronizacji.

    • Możesz ręcznie zaplanować uzupełnianie danych w tabeli wsadowej z okresu do 30 dni wstecz lub z najnowszego dnia, w którym włączono eksportowanie do BigQuery (w zależności od tego, który z tych okresów jest najnowszy).

  • Jeśli włączysz eksportowanie strumieniowe do BigQuery, Firebase wykona te czynności:

    • Każda połączona aplikacja będzie też mieć własną tabelę w czasie rzeczywistym zawierającą stale aktualizowane dane (oprócz tabeli wsadowej aplikacji do codziennego eksportu wsadowego).

    • Po włączeniu przesyłania strumieniowego rozpoczęcie przesyłania danych może potrwać do godziny.


Korzyści z eksportowania strumieniowego do BigQuery

Domyślnie dane są eksportowane do BigQuery w ramach codziennego eksportu zbiorczego. Możesz też przesyłać strumieniowo dane Crashlytics i sesje Firebase w czasie rzeczywistym za pomocą BigQuery strumieniowania. Dane przesyłane strumieniowo możesz wykorzystywać do dowolnych celów, które wymagają danych na żywo, np. do prezentowania informacji w panelu transmisji na żywo, obserwowania wdrożenia na żywo lub monitorowania problemów z aplikacją, które wywołują alerty i niestandardowe przepływy pracy.

Gdy włączysz eksport strumieniowy do BigQuery, będziesz mieć też tabele w czasie rzeczywistym (oprócz tabel wsadowych). Oba typy tabel będą miały ten sam schemat zbioru danych, ale istnieją między nimi pewne istotne różnice:

Tabela zadań wsadowych Tabela Czas rzeczywisty
  • Dane są eksportowane raz dziennie.
  • Zdarzenia są trwale przechowywane przed zapisaniem w BigQuery w ramach zapisu zbiorczego.
  • Dane mogą być uzupełniane do 30 dni wstecz*.
  • Dane są eksportowane w czasie rzeczywistym.
  • Wypełnianie wsteczne nie jest dostępne.

Tabela zbiorcza idealnie nadaje się do długoterminowej analizy i identyfikowania trendów w czasie, ponieważ trwale przechowujemy zdarzenia przed ich zapisaniem i możemy je uzupełniać w tabeli przez maksymalnie 30 dni*. Gdy zapisujemy dane w tabeli czasu rzeczywistego, od razu zapisujemy je w BigQuery, dlatego jest ona idealna do paneli informacyjnych na żywo i niestandardowych alertów. Te 2 tabele można połączyć za pomocą zapytania o łączenie, aby uzyskać korzyści z obu tych rozwiązań.

Domyślnie tabela czasu rzeczywistego ma czas wygaśnięcia partycji wynoszący 30 dni. Aby dowiedzieć się, jak to zmienić, zapoznaj się z sekcją Ustawianie wygaśnięcia segmentu w dokumentacji BigQuery.

* Wypełnianie jest obsługiwane w przypadku danych z ostatnich 30 dni lub z najnowszej daty, w której włączono eksportowanie do BigQuery (w zależności od tego, która z tych dat jest późniejsza).


Ceny i BigQuery piaskownica

Jeśli Twój projekt w Firebase korzysta z bezpłatnego abonamentu Spark, możesz używać BigQuerypiaskownicy, która zapewnia bezpłatny dostęp próbny do BigQuery. Więcej informacji o BigQuery piaskownicy i jej możliwościach znajdziesz w artykule Korzystanie z BigQuery piaskownicy.

Jeśli Twój projekt w Firebase korzysta z abonamentu Blaze z płatnościami według wykorzystania, możesz korzystać ze wszystkich funkcji BigQuery. Korzystanie z BigQuery podlega BigQuerycennikowi, który obejmuje ograniczone bezpłatne korzystanie.


Co dalej?