Buka konsol

Menganalisis Hasil Pengujian

Jika Anda menjalankan pengujian melalui Firebase console atau Firebase CLI, Anda dapat menemukan hasil pengujian terperinci di Firebase console. Baca informasi selengkapnya di bawah untuk mempelajari cara menganalisis hasil pengujian Anda.

Konsep utama

Untuk melihat hasil pengujian, buka bagian Test Lab di Firebase console.

Anda akan menemukan daftar semua pengujian yang dijalankan di sana sebelumnya. Untuk memahami hasilnya, ada baiknya untuk mengetahui sedikit tentang matriks uji: Dimensi Uji × Eksekusi Uji = Matriks Uji

  • Dimensi Uji: atribut perangkat untuk menguji aplikasi Anda, yang meliputi model perangkat, versi OS, lokal, dan orientasi layar.

  • Eksekusi Uji: pengujian individual, masing-masing dengan kombinasi unik dari dimensi uji yang telah Anda pilih untuk diuji.

  • Matriks Uji: hasil dari eksekusi uji pada dimensi uji yang dipilih. Jika ada eksekusi uji yang gagal dalam matriks, seluruh matriks akan ditandai gagal oleh Test Lab.

Menafsirkan hasil matriks uji

Jika Anda memulai pengujian di Firebase console, Test Lab akan mengarahkan Anda ke matriks uji yang sedang berlangsung, di mana Anda dapat menyaksikan kemajuan pengujian Anda secara langsung. Jika Anda menggunakan fitur command-line, Anda dapat mengikuti URL yang disediakan untuk dapat melihat halaman matriks pengujian yang sedang berlangsung.

Matriks memiliki baris untuk setiap eksekusi uji yang dijalankan Test Lab. Ikon sebelum nama eksekusi menampilkan status eksekusi:

  • play_circle_outline Sedang diproses: Eksekusi uji masih berjalan. Eksekusi memerlukan waktu hingga 1 jam untuk diselesaikan, tergantung dari jumlah dan kerumitan pengujian di aplikasi Anda.
  • check_circle Lulus: Tidak ada eksekusi uji yang gagal.
  • peringatan Gagal: Minimal ada 1 eksekusi uji yang gagal.
  • error Tidak meyakinkan: Hasil pengujian tidak meyakinkan, kemungkinan karena terjadi error pada Test Lab.
  • diblokir Dilewati: Test Lab melewati pengujian Anda karena kombinasi versi OS/perangkat yang Anda pilih tidak tersedia.

Menafsirkan hasil dari eksekusi pengujian tunggal

Dari halaman hasil matriks uji, klik salah satu eksekusi uji untuk melihat hasil eksekusi pengujian tertentu.

Halaman ini menunjukkan statistik eksekusi uji tersebut, termasuk masalah yang dihadapi dalam pengujian, daftar kasus pengujian, catatan log dari eksekusi, dan video pengujian yang sedang berjalan.

Hasil uji mendetail

Hasil uji mendetail tersedia di bucket Google Cloud Storage (GCS) selama 90 hari. Klik Lihat File Sumber di halaman hasil eksekusi uji untuk melihat bucket.

Agar hasil pengujian mendetail dapat disimpan selama lebih dari 90 hari, Anda harus mengirimkan hasil pengujian ini ke bucket GCS yang lebih permanen yang Anda miliki menggunakan opsi command line gcloud --results-bucket. Setelah itu, Anda dapat menetapkan setelan Durasi untuk menentukan durasi GCS menyimpan hasil. Untuk mengetahui informasi lebih lanjut mengenai cara mengubah setelan Durasi, baca bagian Kondisi siklus proses.