Como analisar os resultados do teste

Se você executar seus testes no Console do Firebase ou na interface de linha de comando, encontrará os resultados detalhados dos testes no Console do Firebase. Continue a leitura para aprender a analisar os resultados dos seus testes.

Principais conceitos

Para ver os resultados do teste, navegue até a seção Test Lab do Console do Firebase.

Você encontrará uma lista de todos os seus testes anteriores. Para entender os resultados, é útil saber um pouco sobre as matrizes de teste: Dimensões × execuções de teste = matriz de teste

  • Dimensões de teste: atributos do dispositivo para testar seu app, incluindo o modelo, versão do SO, localidade e orientação da tela.

  • Execuções de teste: execuções individuais de teste, cada uma com uma combinação exclusiva de dimensões que você selecionou para testar.

  • Matriz de teste: os resultados das suas execuções de teste nas dimensões selecionadas. Se qualquer execução de teste na matriz falhar, o Test Lab marcará a matriz inteira como reprovada.

Interpretar os resultados da matriz de teste

Se você iniciar seus testes no Firebase console, o Test Lab o levará diretamente para a matriz de testes em andamento, onde será possível acompanhar o progresso dos testes enquanto eles são feitos. Se você usou a ferramenta de linha de comando, pode seguir o URL que ela fornece para acessar a página da matriz de teste em andamento.

A matriz tem uma linha para cada execução de teste do Test Lab. O ícone antes do nome da execução exibe o status dela:

  • play_circle_outline Em andamento: o teste ainda está em execução. As execuções podem levar até uma hora para serem concluídas, dependendo do número e da complexidade dos testes no seu app.
  • check_circle Aprovado: nenhum dos testes executados falhou.
  • warning Reprovado: pelo menos um dos testes executados apresentou falha.
  • error Inconclusivo: os resultados do teste foram inconclusivos, possivelmente devido a um erro no Test Lab.
  • block Ignorado: o Test Lab ignorou seu teste porque a combinação de dispositivo/versão do SO que você selecionou está indisponível.

Como interpretar resultados de uma única execução de teste

Na página de resultados da matriz, clique em uma das execuções de teste para ver o resultado dela.

A página mostra as estatísticas dessa execução de teste, incluindo problemas encontrados nos testes, uma lista de casos de teste, registros da execução e um vídeo do teste em execução.

Resultados detalhados do teste

Os resultados detalhados dos testes estão disponíveis em um intervalo do Google Cloud Storage (GCS) por 90 dias. Clique em Exibir arquivos de origem em uma página de resultados de execução de teste para ver o intervalo.

Para armazenar os resultados detalhados do teste por mais de 90 dias, envie-os para um intervalo do GCS mais permanente de sua propriedade usando a opção de linha de comando do gcloud --results-bucket. Em seguida, você pode definir a configuração de Idade para determinar por quanto tempo o GCS armazena os resultados. Para ver mais informações sobre como alterar a configuração de Idade, consulte Condições de ciclo de vida.

Enviar comentários sobre…

Precisa de ajuda? Acesse nossa página de suporte.