KEPLIN Docs

Executar e ler os resultados

Executar um teste, uma pasta ou todos, ler o resultado passo a passo, o portão da fusão, a execução agendada, os testes instáveis e a exportação JUnit.

Executar

  • Um teste: Executar na barra do teste, ou Executar no menu do teste.
  • Uma pasta: Executar a pasta no menu da pasta.
  • Todos: Executar todos os testes, no topo do minitab Testes.

Há uma execução de cada vez por versão da app. Os testes de ecrã abrem a app num browser da plataforma, partilhado pela instalação: com outras execuções ou capturas em curso, uma execução pode esperar a vez.

Ler o resultado

A execução abre num separador, Execução de testes. Cada teste mostra os passos, com o estado e a duração, e o papel com que foi executado (por exemplo, «como Equipa (ana.silva)», ou «como visitante»). O primeiro passo que falha deixa os seguintes por executar (Não executado). Os filtros Todos, Falharam e Passaram reduzem a lista.

O resultado de uma execução, passo a passo
O resultado de uma execução, passo a passo

Escolha um passo para ver, à direita:

  • a mensagem, em português e com os nomes do ecrã, por exemplo «Não há nenhuma linha com Nome = «Têxteis Norte» em «Tabela de contas». O passo esperou 5 s.»;
  • o Esperado e o Obtido;
  • nos passos de ecrã que falharam, O ecrã no momento da falha;
  • num passo Chamar API, o Pedido e a Resposta da API, com a duração;
  • num passo Executar script que termina com erro, o erro do script;
  • o Pormenor técnico, quando o browser não conseguiu fazer o passo.

Executar de novo repete a mesma escolha de testes, e Executar os que falharam repete só os que falharam. Cancelar a execução pára no fim do passo em curso. Abrir o teste abre o teste no editor.

Os estados de uma execução:

Estado Significado
Passou Todos os testes passaram.
Falhou Pelo menos um teste falhou ou não foi executado.
Bloqueada Falta escolher o datasource de teste de uma base externa com escrita; nenhum teste foi executado.
Cancelada Alguém cancelou a execução.
Erro A execução não chegou ao fim por um erro da plataforma.

O portão da fusão

Com o portão ligado no ambiente de teste do main, fundir uma versão no main executa primeiro os testes do portão na versão de origem. Se não passarem, o diálogo do merge diz Os testes do portão não passaram. Nada foi fundido., com os testes que falharam e Ver a execução. Um administrador pode Fundir mesmo assim; fica registado na auditoria.

A execução agendada

A execução agendada executa todos os testes à hora da expressão do ambiente de teste. Um teste que falha numa execução agendada fica como problema no Radar da app, e os alertas por email avisam quem está atribuído à app, como de qualquer outro problema.

Testes instáveis

Um teste que passa e falha alternadamente, sem mudanças na app, aparece em Instáveis, com a sequência das últimas execuções. Um teste instável costuma depender de dados que mudam ou de uma ordem que não é garantida.

Exportar para um CI externo

JUnit, no resultado de uma execução, descarrega a execução em JUnit XML, o formato que os sistemas de integração contínua lêem.

Perguntas frequentes

O passo falhou por tempo. O passo passou do limite de Segundos por passo do ambiente de teste. Num ecrã lento, aumente o limite; numa verificação que nunca se cumpre, veja o Obtido.

O passo de API falhou com «Pedido HTTP sem resposta simulada». A API fez um pedido a um endereço sem resposta simulada no ambiente de teste. Junte-a em Respostas HTTP simuladas.

O teste falhou com «O papel … não tem utilizador de teste». O teste entra na app com um papel, e esse papel não tem conta escolhida em Ambiente de teste › Utilizadores de teste. Escolha uma conta activa com esse papel.