Check out what’s new from Firebase@ Google I/O 2021, and join our alpha program for early access to the new Remote Config personalization feature. Learn more

A/B Testi ile Mesajlaşma Deneyleri Oluşturun

Kullanıcılarınıza ulaşırken veya yeni bir pazarlama kampanyası başlatırken, doğru anladığınızdan emin olmak istersiniz. A/B testi, kullanıcı tabanınızın seçilen bölümlerinde mesaj değişkenlerini test ederek en uygun ifadeyi ve sunumu bulmanıza yardımcı olabilir. Hedefiniz ister daha iyi elde tutma ister bir teklifte dönüşüm olsun, A/B testi, bir mesaj varyantının seçtiğiniz hedef için kontrol grubundan daha iyi performans gösterip göstermediğini belirlemek için istatistiksel analiz yapabilir.

Bir kontrol grubuyla özellik varyantlarını A/B test etmek için aşağıdakileri yapın:

  1. Denemenizi oluşturun.
  2. Denemenizi bir test cihazında doğrulayın.
  3. Denemenizi yönetin.

Deneme oluştur

Bildirim oluşturucuyu kullanan bir deney, tek bir bildirim mesajında ​​birden çok varyantı değerlendirmenize olanak tanır.

  1. Firebase'de oturum açın, Veri paylaşımı ayarlarını güncelleyin ve veri paylaşımının etkinleştirildiğinden emin olun. Veri paylaşımı olmadan, denemeniz analiz verilerine erişemez.
  2. Firebase konsolu gezinme çubuğunun Engage bölümünde, A/B Testi ' ni tıklayın.
  3. Deneme oluştur 'u tıklayın ve ardından, denemek istediğiniz hizmet sorulduğunda Bildirimler'i seçin.
  4. Denemeniz için bir Ad ve isteğe bağlı Açıklama girin ve İleri 'yi tıklayın.
  5. Önce denemenizi kullanan uygulamayı seçerek Hedefleme alanlarını doldurun. Ayrıca, aşağıdakileri içeren seçenekleri belirleyerek, kullanıcılarınızın bir alt kümesini denemenize katılmaları için hedefleyebilirsiniz:

    • Sürüm: Uygulamanızın bir veya daha fazla sürümü
    • Kullanıcı kitlesi: Denemeye dahil edilebilecek kullanıcıları hedeflemek için kullanılan analiz kitleleri
    • Kullanıcı mülkü: Denemeye dahil edilebilecek kullanıcıları seçmek için bir veya daha fazla Analytics kullanıcı mülkü
    • Tahmin: Makine öğrenimi tarafından belirli bir davranışta bulunmaları için tahmin edilen kullanıcı grupları
    • Ülke/Bölge: Denemeye dahil edilebilecek kullanıcıları seçmek için bir veya daha fazla ülke veya bölge
    • Cihaz dili: Denemeye dahil edilebilecek kullanıcıları seçmek için kullanılan bir veya daha fazla dil ve yerel ayar
  6. Hedef kullanıcı yüzdesini ayarlayın : Kontrol grubu ile denemenizdeki bir veya daha fazla değişken arasında eşit olarak bölmek istediğiniz kullanıcıları hedefle altında belirlenen ölçütlerle eşleşen uygulamanızın kullanıcı tabanının yüzdesini seçin. Bu, %0.01 ile %100 arasında herhangi bir yüzde olabilir. Yüzdeler, yinelenen deneyler de dahil olmak üzere her deney için kullanıcılara rastgele yeniden atanır.

  7. Varyantlar bölümünde, Mesaj girin metin alanına kontrol grubuna gönderilecek bir mesaj yazın . Kontrol grubuna mesaj göndermek için bu alanı boş bırakın.

  8. (isteğe bağlı) Denemenize birden fazla varyant eklemek için Varyant Ekle 'yi tıklayın. Varsayılan olarak, deneylerde bir kontrol grubu ve bir varyant bulunur.

  9. (isteğe bağlı) Varyant A , Varyant B vb. adları değiştirmek üzere denemenizdeki her bir varyant için bir ad girin.

  10. Deneme varyantlarını değerlendirirken, açılır listeden istediğiniz ek metriklerle birlikte kullanmak üzere denemeniz için bir hedef metrik tanımlayın. Bu metrikler, yerleşik hedefleri (etkileşim, satın alma, gelir, elde tutma vb.), Analytics dönüşüm etkinliklerini ve diğer Analytics etkinliklerini içerir.

  11. Mesajınız için seçenekleri belirleyin:

    • Teslim tarihi: Denemenizi kaydettikten hemen sonra başlatmak için Şimdi Gönder'i veya gelecekte denemenizi başlatmak için bir zaman belirtmek için Planlandı'yı seçin .
    • Gelişmiş seçenekler: Denemenize dahil edilen tüm bildirimler için gelişmiş seçenekleri belirlemek için Gelişmiş seçenekler öğesini genişletin ve ardından listelenen mesaj seçeneklerinden herhangi birini değiştirin.
  12. Denemenizi kaydetmek için Gözden Geçir'e tıklayın.

Proje başına en fazla 300 denemeye izin verilir ve bu denemelerin geri kalanı taslak veya tamamlanmış olarak 24 adede kadar devam eden denemeden oluşabilir.

Denemenizi bir test cihazında doğrulayın

Her Firebase kurulumu için onunla ilişkili FCM kayıt belirtecini alabilirsiniz. Bu belirteci, uygulamanızın yüklü olduğu bir test cihazında belirli deneme varyantlarını test etmek için kullanabilirsiniz. Denemenizi bir test cihazında doğrulamak için aşağıdakileri yapın:

  1. FCM kayıt belirtecini aşağıdaki gibi alın:

    hızlı

    Messaging.messaging().token { token, error in
      if let error = error {
        print("Error fetching FCM registration token: \(error)")
      } else if let token = token {
        print("FCM registration token: \(token)")
        self.fcmRegTokenMessage.text  = "Remote FCM registration token: \(token)"
      }
    }
    

    Amaç-C

    [[FIRMessaging messaging] tokenWithCompletion:^(NSString *token, NSError *error) {
      if (error != nil) {
        NSLog(@"Error getting FCM registration token: %@", error);
      } else {
        NSLog(@"FCM registration token: %@", token);
        self.fcmRegTokenMessage.text = token;
      }
    }];
    

    Java

    FirebaseMessaging.getInstance().getToken()
        .addOnCompleteListener(new OnCompleteListener<String>() {
            @Override
            public void onComplete(@NonNull Task<String> task) {
              if (!task.isSuccessful()) {
                Log.w(TAG, "Fetching FCM registration token failed", task.getException());
                return;
              }
    
              // Get new FCM registration token
              String token = task.getResult();
    
              // Log and toast
              String msg = getString(R.string.msg_token_fmt, token);
              Log.d(TAG, msg);
              Toast.makeText(MainActivity.this, msg, Toast.LENGTH_SHORT).show();
            }
        });

    Kotlin+KTX

    FirebaseMessaging.getInstance().token.addOnCompleteListener(OnCompleteListener { task ->
        if (!task.isSuccessful) {
            Log.w(TAG, "Fetching FCM registration token failed", task.exception)
            return@OnCompleteListener
        }
    
        // Get new FCM registration token
        val token = task.result
    
        // Log and toast
        val msg = getString(R.string.msg_token_fmt, token)
        Log.d(TAG, msg)
        Toast.makeText(baseContext, msg, Toast.LENGTH_SHORT).show()
    })

    C++

    firebase::InitResult init_result;
    auto* installations_object = firebase::installations::Installations::GetInstance(
        firebase::App::GetInstance(), &init_result);
    installations_object->GetToken().OnCompletion(
        [](const firebase::Future& future) {
          if (future.status() == kFutureStatusComplete &&
              future.error() == firebase::installations::kErrorNone) {
            printf("Installations Auth Token %s\n", future.result()->c_str());
          }
        });
        

    Unity

    Firebase.Messaging.FirebaseMessaging.DefaultInstance.GetTokenAsync().ContinueWith(
      task => {
        if (!(task.IsCanceled || task.IsFaulted) && task.IsCompleted) {
          UnityEngine.Debug.Log(System.String.Format("FCM registration token {0}", task.Result));
        }
      });
    
  2. Firebase konsolu gezinme çubuğunda A/B Testi ' ni tıklayın.
  3. Taslak ' ı tıklayın, fareyle denemenizin üzerine gelin, bağlam menüsünü ( ) tıklayın ve ardından Test cihazlarını yönet'i tıklayın.
  4. Bir test cihazı için FCM jetonunu girin ve o test cihazına gönderilecek deney varyantını seçin.
  5. Uygulamayı çalıştırın ve seçilen varyantın test cihazında alındığını onaylayın.

Denemenizi yönetin

İster Remote Config, Bildirim oluşturucu veya Firebase Uygulama İçi Mesajlaşma ile bir deneme oluşturun, ardından denemenizi doğrulayıp başlatabilir, denemenizi çalışırken izleyebilir ve devam eden denemenize dahil edilen kullanıcı sayısını artırabilirsiniz.

Denemeniz bittiğinde, kazanan varyant tarafından kullanılan ayarları not alabilir ve ardından bu ayarları tüm kullanıcılara sunabilirsiniz. Veya başka bir deneme çalıştırabilirsiniz.

Bir deneme başlatın

  1. Firebase konsolu gezinme çubuğunun Engage bölümünde, A/B Testi ' ni tıklayın.
  2. Taslak ' ı ve ardından denemenizin başlığını tıklayın.
  3. Uygulamanızın denemenize dahil edilecek kullanıcıları olduğunu doğrulamak için taslak ayrıntılarını genişletin ve Hedefleme ve dağıtım bölümünde %0'dan büyük bir sayı olup olmadığını kontrol edin (örneğin, ölçütlere uyan kullanıcıların %1'i ).
  4. Denemenizi değiştirmek için Düzenle 'yi tıklayın.
  5. Denemenizi başlatmak için Denemeyi Başlat ' ı tıklayın. Bir seferde proje başına 24 adede kadar deney çalıştırabilirsiniz.

Bir deneyi izleyin

Bir deneme bir süre çalıştırıldıktan sonra, ilerlemesini kontrol edebilir ve şu ana kadar denemenize katılan kullanıcılar için sonuçlarınızın nasıl göründüğünü görebilirsiniz.

  1. Firebase konsolu gezinme çubuğunun Engage bölümünde, A/B Testi ' ni tıklayın.
  2. Çalışıyor öğesini ve ardından denemenizin başlığını tıklayın. Bu sayfada, aşağıdakiler dahil olmak üzere, devam eden denemeniz hakkında gözlemlenen ve modellenen çeşitli istatistikleri görüntüleyebilirsiniz:

    • Taban çizgisinden fark yüzdesi : Belirli bir varyant için bir metriğin taban çizgisine (veya kontrol grubuna) kıyasla gelişiminin bir ölçüsü. Varyant için değer aralığını, temel için değer aralığıyla karşılaştırarak hesaplanır.
    • Temel çizgiyi geçme olasılığı : Belirli bir varyantın, seçilen metrik için temel çizgiyi geçme olasılığı.
    • kullanıcı başına observed_metric : Deneme sonuçlarına göre, bu, metrik değerinin zaman içinde düşeceği tahmin edilen aralıktır.
    • Toplam observed_metric : Kontrol grubu veya değişken için gözlemlenen kümülatif değer. Değer, her bir deneme varyantının ne kadar iyi performans gösterdiğini ölçmek için kullanılır ve İyileştirme , Değer aralığı , Temel çizgiyi geçme olasılığı ve en iyi değişken olma olasılığı hesaplamak için kullanılır. Ölçülen metriğe bağlı olarak, bu sütun "Kullanıcı başına süre", "Kullanıcı başına gelir", "Elde tutma oranı" veya "Dönüşüm oranı" olarak etiketlenebilir.
  3. Denemeniz bir süre çalıştıktan sonra (FCM ve Uygulama İçi Mesajlaşma için en az 7 gün veya Remote Config için 14 gün), bu sayfadaki veriler, varsa hangi varyantın "lider" olduğunu gösterir. Bazı ölçümlere, verileri görsel bir biçimde sunan bir çubuk grafik eşlik eder.

Bir denemeyi tüm kullanıcılara sunun

Bir deneme, hedef metriğiniz için bir "lider" veya kazanan varyantınız olacak kadar uzun bir süre çalıştırıldıktan sonra, denemeyi kullanıcıların %100'üne sunabilirsiniz. Bu, ileriye dönük olarak tüm kullanıcılara yayınlamak için bir varyant seçmenize olanak tanır. Denemeniz net bir kazanan oluşturmamış olsa bile, yine de tüm kullanıcılarınıza bir varyant sunmayı seçebilirsiniz.

  1. Firebase konsolu gezinme çubuğunun Engage bölümünde, A/B Testi ' ni tıklayın.
  2. Eğer, bütün kullanıcılara yayılmasını bağlam menüsünü (tıklayın istediğiniz Tamamlanmış veya Running tıkla bir deney tıklayın ) ve sonra varyant dışarı rulo tıklayın.
  3. Aşağıdakilerden birini yaparak denemenizi tüm kullanıcılara sunun:

    • Bildirim oluşturucuyu kullanan bir denemede, mesajı denemenin parçası olmayan kalan hedeflenen kullanıcılara göndermek için Mesajı kullanıma sun iletişim kutusunu kullanın.
    • Remote Config denemesi için hangi Remote Config parametre değerlerinin güncelleneceğini belirlemek için bir varyant seçin. Denemeyi oluştururken tanımlanan hedefleme ölçütleri, kullanıma sunmanın yalnızca deneme tarafından hedeflenen kullanıcıları etkilemesini sağlamak için şablonunuza yeni bir koşul olarak eklenecektir. Değişiklikleri gözden geçirmek için Remote Config'de Gözden Geçir'e tıkladıktan sonra, dağıtımı tamamlamak için Değişiklikleri yayımla'ya tıklayın.
    • Bir Uygulama İçi Mesajlaşma denemesi için, bağımsız bir Uygulama İçi Mesajlaşma kampanyası olarak hangi varyantın kullanıma sunulması gerektiğini belirlemek için iletişim kutusunu kullanın. Seçildikten sonra, yayınlamadan önce herhangi bir değişiklik (gerekirse) yapmak için FIAM oluşturma ekranına yönlendirileceksiniz.

Bir denemeyi genişlet

Bir denemenin A/B Testinin lider ilan etmesi için yeterli sayıda kullanıcı getirmediğini fark ederseniz, uygulamanın kullanıcı tabanının daha büyük bir yüzdesine ulaşmak için denemenizin dağıtımını artırabilirsiniz.

  1. Firebase konsolu gezinme çubuğunun Engage bölümünde, A/B Testi ' ni tıklayın.
  2. Düzenlemek istediğiniz devam eden denemeyi seçin.
  3. genel bakışta , bağlam menüsünü ( ) ve ardından Çalışan denemeyi düzenle'yi tıklayın.
  4. Hedefleme iletişim kutusu, çalışmakta olan denemede bulunan kullanıcıların yüzdesini artırma seçeneği görüntüler. Geçerli yüzdeden daha büyük bir sayı seçin ve Yayınla'yı tıklayın. Deneme, belirttiğiniz kullanıcı yüzdesine aktarılacaktır.

Bir denemeyi çoğaltma veya durdurma

  1. Firebase konsolu gezinme çubuğunun Engage bölümünde, A/B Testi ' ni tıklayın.
  2. Tamamlandı veya Çalışıyor öğesini tıklayın, fareyle denemenizin üzerine gelin, bağlam menüsünü ( ) tıklayın ve ardından Denemeyi çoğalt veya Denemeyi durdur öğesini tıklayın.

Kullanıcı hedefleme

Aşağıdaki kullanıcı hedefleme ölçütlerini kullanarak denemenize dahil edilecek kullanıcıları hedefleyebilirsiniz.

Hedefleme ölçütü Operatör(ler) Değer(ler) Not
Sürüm içerir,
içermiyor,
birebir eşleşir,
normal ifade içerir
Denemeye dahil etmek istediğiniz bir veya daha fazla uygulama sürümü için bir değer girin.

içerir , içermez veya işleçlerle tam olarak eşleşirken, virgülle ayrılmış bir değerler listesi sağlayabilirsiniz.

Normal ifade içerir operatörünü kullanırken, RE2 biçiminde normal ifadeler oluşturabilirsiniz. Normal ifadeniz, hedef sürüm dizesinin tamamı veya bir kısmıyla eşleşebilir. Bir hedef dizenin başlangıcını, sonunu veya tamamını eşleştirmek için ^ ve $ bağlantılarını da kullanabilirsiniz.

Kullanıcı kitleleri tümünü içerir,
en az birini içerir,
tamamını içermez,
en az birini içermez
Denemenize dahil olabilecek kullanıcıları hedeflemek için bir veya daha fazla Analytics kitlesi seçin.
Kullanıcı mülkü Metin için:
içerir,
içermiyor,
tam olarak eşleşir,
normal ifade içerir

Sayılar için:
<, ≤, =, ≥, >
Kullanıcı mülkü değerlerini seçmek için çeşitli seçeneklerle birlikte bir denemeye dahil edilebilecek kullanıcıları seçmek için bir Analytics kullanıcı mülkü kullanılır.

İstemcide, kullanıcı özellikleri için yalnızca dize değerleri ayarlayabilirsiniz. Sayısal işleçleri kullanan koşullar için Remote Config hizmeti, karşılık gelen kullanıcı özelliğinin değerini bir tam sayıya/kayan değere dönüştürür.
Normal ifade içerir operatörünü kullanırken, RE2 biçiminde normal ifadeler oluşturabilirsiniz. Normal ifadeniz, hedef sürüm dizesinin tamamı veya bir kısmıyla eşleşebilir. Bir hedef dizenin başlangıcını, sonunu veya tamamını eşleştirmek için ^ ve $ bağlantılarını da kullanabilirsiniz.
tahmin Yok Firebase Predictions tarafından tanımlanan kullanıcı gruplarını hedefleyin; örneğin, uygulamanızı kullanmayı bırakma olasılığı yüksek olanlar veya uygulama içi satın alma yapma olasılığı yüksek kullanıcılar. Firebase Predictions aracı tarafından tanımlanan değerlerden birini seçin. Bir seçenek yoksa, Firebase konsolunun Predictions bölümünü ziyaret ederek Firebase Predictions'a kaydolmanız gerekebilir.
Cihaz ülkesi Yok Denemeye dahil edilebilecek kullanıcıları seçmek için kullanılan bir veya daha fazla ülke veya bölge.
Cihaz dili Yok Denemeye dahil edilebilecek kullanıcıları seçmek için kullanılan bir veya daha fazla dil ve yerel ayar. Bu hedefleme ölçütü yalnızca Remote Config için kullanılabilir.
İlk açık daha fazla
daha az
arasında
Kullanıcıları, gün olarak belirtilen, uygulamanızı ilk açtıkları zamana göre hedefleyin. Bu hedefleme ölçütü yalnızca Firebase Uygulama İçi Mesajlaşma için kullanılabilir.
Son uygulama etkileşimi daha fazla
daha az
arasında
Kullanıcıları gün olarak belirtilen, uygulamanızla en son ne zaman etkileşim kurduklarına göre hedefleyin. Bu hedefleme ölçütü yalnızca Firebase Uygulama İçi Mesajlaşma için kullanılabilir.

A/B Testi metrikleri

Denemenizi oluşturduğunuzda, deneme varyantlarını karşılaştırmak için kullanılan bir metrik seçersiniz ve ayrıca, her bir deneme varyantını daha iyi anlamanıza ve önemli yan etkileri (uygulama çökmeleri gibi) tespit etmenize yardımcı olması için izleyeceğiniz diğer metrikleri de seçebilirsiniz. Aşağıdaki tablolar, hedef metriklerin ve diğer metriklerin nasıl hesaplandığına ilişkin ayrıntıları sağlar.

Hedef metrikleri

Metrik Açıklama
Saklama (1 gün) Günlük olarak uygulamanıza dönen kullanıcı sayısı.
Saklama (2-3 gün) 2-3 gün içinde uygulamanıza dönen kullanıcı sayısı.
Saklama (4-7 gün) 4-7 gün içinde uygulamanıza dönen kullanıcı sayısı.
Saklama (8-14 gün) 8-14 gün içinde uygulamanıza geri dönen kullanıcı sayısı.
Saklama (15+ gün) Uygulamanıza son kullanmalarından 15 veya daha fazla gün sonra geri dönen kullanıcıların sayısı.
Bildirim açık Bir kullanıcının Bildirim oluşturucusu tarafından gönderilen bildirimi açıp açmadığını izler.
Satın alma geliri Tüm ecommerce_purchase ve in_app_purchase etkinlikleri için birleşik değer.
Tahmini AdMob geliri AdMob'dan tahmini kazançlar.
Tahmini toplam gelir Satın alma ve tahmini AdMob gelirleri için birleşik değer.
first_open Bir kullanıcı bir uygulamayı yükledikten veya yeniden yükledikten sonra ilk kez açtığında tetiklenen bir Analytics olayı. Bir dönüşüm hunisinin parçası olarak kullanılır.
bildirim_open Bir kullanıcı, Bildirim oluşturucu tarafından gönderilen bir bildirimi açtığında tetiklenen bir Analytics olayı. Bir dönüşüm hunisinin parçası olarak kullanılır.

Diğer metrikler

Metrik Açıklama
Çökmeyen kullanıcılar Uygulamanızda, deneme sırasında Firebase Crashlytics SDK tarafından tespit edilen hatalarla karşılaşmayan kullanıcıların yüzdesi.
bildirim_dismiss Bildirim oluşturucu tarafından gönderilen bir bildirim kapatıldığında tetiklenen bir Analytics olayı (yalnızca Android).
bildirim_almak Uygulama arka plandayken (yalnızca Android) Bildirim oluşturucu tarafından gönderilen bir bildirim alındığında tetiklenen bir Analytics olayı.
os_update Cihaz işletim sisteminin ne zaman yeni bir sürüme güncellendiğini izleyen bir Analytics olayı. Daha fazla bilgi edinmek için Otomatik olarak toplanan olaylar bölümüne bakın.
ekran_görünümü Uygulamanızda görüntülenen ekranları izleyen bir Analytics etkinliği. Daha fazla bilgi edinmek için bkz. Ekran Görünümlerini İzleme .
oturum_başlangıç Uygulamanızdaki kullanıcı oturumlarını sayan bir Analytics etkinliği. Daha fazla bilgi edinmek için Otomatik olarak toplanan olaylar bölümüne bakın.
Kullanıcı etkileşimi Uygulamanız ön plandayken periyodik olarak tetiklenen bir Analytics olayı. Daha fazla bilgi edinmek için Otomatik olarak toplanan olaylar bölümüne bakın.

BigQuery verilerini dışa aktarma

A/B testlerinizle ilgili tüm analiz verilerine BigQuery'den erişebilirsiniz. BigQuery, verileri BigQuery SQL kullanarak analiz etmenize, başka bir bulut sağlayıcısına aktarmanıza veya verileri özel makine öğrenimi modelleriniz için kullanmanıza olanak tanır. Daha fazla bilgi için BigQuery'yi Firebase'e Bağlama konusuna bakın.

BigQuery veri dışa aktarımından tam olarak yararlanmak için Firebase projeleri, "Blaze" kullandıkça öde fiyatlandırma planını benimsemelidir. BigQuery, verileri depolamak, ekleri yayınlamak ve verileri sorgulamak için ücret alır. Verilerin yüklenmesi ve dışa aktarılması ücretsizdir. Daha fazla bilgi için BigQuery Fiyatlandırmasına veya BigQuery korumalı alanına bakın.

Başlamak için Firebase projenizin BigQuery'ye bağlı olduğundan emin olun. Sol gezinme çubuğundan Ayarlar > Proje Ayarları'nı ve ardından Entegrasyonlar > BigQuery > Bağlantı'yı seçin . Bu sayfa, projedeki tüm uygulamalar için BiqQuery analiz verilerini dışa aktarmayı gerçekleştirme seçeneklerini görüntüler.

Bir deneme için analiz verilerini sorgulamak için:

  1. Etkin deneyler listenizden, deney sonuçları sayfasını açmak için istediğiniz deneyi seçin.
  2. genel bakış bölmesindeki bağlam menüsünden Deneme verilerini seçin (bu seçenek ücretsiz katmandaki projeler için kullanılamaz).

    Bu, BigQuery konsolunun sorgu oluşturucusunu, incelemeniz için önceden yüklenmiş deneme verilerinin otomatik oluşturulmuş bir örnek sorgusu ile açar. Bu sorguda, denemeniz, anahtarda deneme adı ve değerde deneme varyantı ile bir kullanıcı özelliği olarak kodlanır.

  3. Sorgu oluşturucuda, Sorguyu çalıştır'ı seçin . Sonuçlar alt bölmede görüntülenir.

BigQuery'deki Firebase verileri günde yalnızca bir kez güncellendiğinden, deneme sayfasında bulunan verilerin BigQuery konsolunda bulunan verilerden daha güncel olabileceğini unutmayın.