Repetir um teste com dados diferentes

Serviços de DevOps do Azure | Azure DevOps Server 2022 - Azure DevOps Server 2019 | TFS 2018

Adicione parâmetros ao seu teste manual para repetir o teste com dados de teste diferentes. Por exemplo, você pode testar a adição de quantidades diferentes a um carrinho de compras a partir de quantidades de 1, 5, 10 ou 200.

Insira parâmetros em suas etapas de teste para um caso de teste manual. Em seguida, forneça uma tabela de valores de parâmetros. Você pode adicionar parâmetros compartilhados para casos de teste ou converter parâmetros inseridos recentemente em parâmetros compartilhados. Etapas compartilhadas e parâmetros compartilhados são tipos de item de trabalho diferentes que podem ser compartilhados em vários casos de teste. Eles são vinculados a casos de teste por meio dos tipos de link Test Cases-Shared Steps e Referenced By-Referenced , conforme mostrado na ilustração a seguir.

O diagrama mostra as Etapas Compartilhadas conectadas ao Caso de Teste, que também está conectado aos Parâmetros Compartilhados.

Com etapas e parâmetros compartilhados, você pode executar vários casos de teste com os mesmos dados.

Pré-requisitos

Você deve ter as seguintes permissões e níveis de acesso:

  • Acesso básico ou superior e permissões para exibir itens de trabalho no Caminho de Área correspondente. Para obter mais informações, consulte Adicionar usuários a um projeto ou equipe.
  • Nível de acesso Básico + Planos de Teste para adicionar planos de teste e conjuntos de testes, excluir artefatos de teste e definir configurações de teste. Ou tenha uma das seguintes assinaturas do Visual Studio:
  • Você deve ter as seguintes permissões:para adicionar ou editar artefatos relacionados ao teste,
    • Editar itens de trabalho neste nó Permissão definida como Permitir no Caminho de Área correspondente, para adicionar ou modificar planos de teste, conjuntos de testes, casos de teste ou outros tipos de item de trabalho baseados em teste.
    • Gerenciar permissões de planos de teste definidas como Permitir no Caminho de Área correspondente, para modificar as propriedades do plano de teste, como configurações de compilação e teste,.
    • Gerenciar conjuntos de permissões de pacotes de teste definidos como Permitir no Caminho de Área correspondente, para criar e excluir conjuntos de testes, adicionar e remover casos de teste de conjuntos de testes, alterar configurações de teste associadas a conjuntos de teste e modificar uma hierarquia de conjunto de testes (mover um conjunto de testes).

Para obter mais informações, consulte Acesso e permissões de teste manual.

Adicionar parâmetros a um caso de teste

Siga as etapas a seguir para adicionar parâmetros aos testes.

  1. Crie um parâmetro digitando um nome precedido por "@" nas ações e resultados esperados das etapas de teste.

    A captura de tela mostra como inserir nomes e valores de parâmetros.

  2. Abaixo da lista de etapas, adicione combinações de valores de parâmetros. Talvez seja necessário rolar para baixo para vê-los.

  1. Crie um parâmetro digitando um nome precedido por "@" nas ações e resultados esperados das etapas de teste.

    A captura de tela mostra a criação de um parâmetro.

  2. Abaixo da lista de etapas, adicione combinações de valores de parâmetros. Talvez seja necessário rolar para baixo para vê-los.

Compartilhar parâmetros entre casos de teste

Execute as etapas a seguir para converter parâmetros existentes em parâmetros compartilhados, para que você possa usá-los e os dados associados em outros casos de teste.

  1. Em um caso de teste aberto, selecione Converter em parâmetros compartilhados.

    A captura de tela mostra a conversão de parâmetros existentes em parâmetros compartilhados.

  2. Depois de criar um conjunto de parâmetros compartilhados, abra outro caso de teste e adicione o conjunto de parâmetros compartilhados a esse caso de teste.

    A captura de tela mostra a adição do conjunto de parâmetros compartilhados a um caso de teste.

    Você pode pesquisar o parâmetro compartilhado definido pelo nome.

    O conjunto de parâmetros compartilhados é exibido na seção Valores de parâmetro depois de adicioná-lo. Agora você pode usar esses parâmetros em suas etapas de caso de teste.

  3. Se o caso de teste tiver nomes de parâmetros diferentes para esses parâmetros compartilhados, mapeie os parâmetros compartilhados para os parâmetros locais para usar os dados de parâmetros compartilhados.

    A captura de tela mostra o mapeamento de um parâmetro compartilhado para um parâmetro local.

    Quando eles são mapeados corretamente, os dados associados ao parâmetro compartilhado são exibidos.

  4. Adicione, edite e renomeie seus conjuntos de parâmetros compartilhados na página Parâmetros . Exiba os casos de teste que fazem referência a eles no painel Casos de teste.

    A captura de tela mostra opções para adicionar, editar, exibir e renomear um parâmetro compartilhado.

  5. Cada conjunto de parâmetros compartilhados é um item de trabalho. Abra a página Propriedades para exibir ou fazer alterações neste item de trabalho. Por exemplo, você pode atribuir proprietários e controlar alterações.

Não é possível adicionar mais de um conjunto de parâmetros compartilhados a um único caso de teste. Se dois casos de teste compartilharem dados semelhantes, você pode considerar a criação de um único conjunto de parâmetros compartilhados, que contém todos os parâmetros, mesmo que algumas das colunas no conjunto permaneçam sem uso em cada caso de teste. Por exemplo, um caso de teste precisa de ID de cliente, nome, e-mail e telefone, e o segundo precisa de ID de cliente, nome e endereço.

Você pode importar valores de parâmetros de uma planilha do Excel para seus conjuntos de parâmetros compartilhados. Cole os valores na grade de parâmetros compartilhados. Você também pode copiar os dados da sua grade de volta para o Excel.

  1. Converta parâmetros existentes em parâmetros compartilhados para que você possa usá-los e os dados associados em outros casos de teste.

    A captura de tela mostra a conversão de parâmetros existentes em parâmetros compartilhados.

  2. Depois de criar um conjunto de parâmetros compartilhados, abra outro caso de teste e adicione o conjunto de parâmetros compartilhados a esse caso de teste. Você pode pesquisar o parâmetro compartilhado definido pelo nome.

    Captura de tela mostrando a adição do conjunto de parâmetros compartilhados a um caso de teste.

    O conjunto de parâmetros compartilhados é exibido na seção Valores de parâmetro depois de adicioná-lo. Agora você pode usar esses parâmetros em suas etapas de caso de teste.

  3. Se o caso de teste tiver nomes de parâmetros diferentes para esses parâmetros compartilhados, mapeie os parâmetros compartilhados para os parâmetros locais para usar os dados de parâmetros compartilhados.

    A captura de tela mostra o mapeamento de um parâmetro compartilhado para um parâmetro local.

    Quando eles são mapeados corretamente, os dados associados ao parâmetro compartilhado são exibidos.

  4. Adicione, edite e renomeie seus conjuntos de parâmetros compartilhados na página Parâmetros . Exiba os casos de teste que fazem referência a eles no painel Casos de teste.

    Adicionar, editar, visualizar e renomear um parâmetro compartilhado

  5. Cada conjunto de parâmetros compartilhados é um item de trabalho. Abra a página Propriedades para exibir ou fazer alterações neste item de trabalho. Por exemplo, você pode atribuir proprietários e controlar alterações.

Não é possível adicionar mais de um conjunto de parâmetros compartilhados a um único caso de teste. Se dois casos de teste compartilharem dados semelhantes, você pode considerar a criação de um único conjunto de parâmetros compartilhados que contenha todos os parâmetros, mesmo que algumas das colunas do conjunto permaneçam sem uso em cada caso de teste. Por exemplo, um caso de teste precisa de ID de cliente, nome, e-mail e telefone, e o segundo precisa de ID de cliente, nome e endereço.

Você pode importar valores de parâmetros de uma planilha do Excel para seus conjuntos de parâmetros compartilhados. Cole os valores na grade de parâmetros compartilhados. Você também pode copiar os dados da sua grade de volta para o Excel.

Executar um caso de teste com parâmetros

Execute as etapas a seguir para executar um caso de teste que usa parâmetros.

  1. Selecione um caso de teste com parâmetros e comece a executá-lo. O Test Runner mostra a primeira linha de valores de parâmetro.

    A captura de tela mostra o Test Runner exibindo a primeira linha de valores de parâmetro.

  2. Ao concluir as etapas, marque o teste aprovado ou reprovado. Vá para a próxima iteração do teste, que usa a próxima linha de valores de parâmetro.

    A captura de tela mostra a próxima iteração do teste.

  3. Use o menu para navegar para outras iterações.

    A captura de tela mostra a navegação para outras iterações.

  4. Se algum dos valores de parâmetro estiver incorreto, corrija-os sem cancelar o teste escolhendo Editar no menu de atalho da etapa.

  1. Selecione um caso de teste com parâmetros e comece a executá-lo. O Test Runner mostra a primeira linha de valores de parâmetro.

    A captura de tela mostra o Test Runner e a primeira linha de valores de parâmetro.

  2. Ao concluir as etapas, marque o teste aprovado ou reprovado. Em seguida, vá para a próxima iteração do teste, que usa a próxima linha de valores de parâmetro.

    A captura de tela mostra a próxima iteração do teste.

  3. Use a lista suspensa para navegar para outras iterações.

    A captura de tela mostra a navegação para outras iterações.

  4. Se algum dos valores de parâmetro estiver incorreto, corrija-os sem cancelar o teste escolhendo Editar no menu de atalho.

Rever os resultados dos testes

O resultado do teste é baseado em uma hierarquia de precedência de todos os resultados da iteração. A ordem hierárquica é Pausado, Falhado, Bloqueado, Aprovado, Não Aplicável e Não Especificado (Ativo). Por exemplo, se você marcou qualquer iteração como reprovada e todo o restante como aprovado, o resultado de todo o teste será mostrado como reprovado. Esse resultado é diferente dos casos de teste que não têm parâmetros, em que o resultado exibe o status da última execução.

Para revisar os resultados do teste, na guia Executar , selecione um ponto de teste. Selecione Mais opções ou clique com o botão direito do mouse para abrir o menu de contexto. Selecione Exibir resultados do teste.

A captura de tela mostra a seleção da opção Exibir resultados do teste no menu de contexto.

Você pode exibir os resultados na caixa de diálogo Resultados do caso de teste.

A captura de tela mostra os resultados do teste para um ponto de teste.

O resultado do teste é baseado em uma hierarquia de precedência de todos os resultados da iteração. A ordem hierárquica é Pausado, Falhado, Bloqueado, Aprovado, Não Aplicável e Não Especificado (Ativo). Por exemplo, se você marcou qualquer iteração como reprovada e todo o restante como aprovado, o resultado de todo o teste será mostrado como reprovado. Esse resultado é diferente dos casos de teste que não têm parâmetros, em que o resultado exibe o status da última execução.

  1. Verifique o resultado do teste abrindo o painel de detalhes.

    A captura de tela mostra a verificação do resultado do teste no painel de detalhes.

  2. Clique duas vezes em um resultado de teste para exibir os detalhes da execução do teste e os resultados do teste para cada iteração.

    A captura de tela mostra a visualização dos detalhes da execução do teste.

Acelere as iterações de teste usando gravação e reprodução

Pode ser propenso a erros e tedioso trabalhar através de uma longa tabela de combinações de parâmetros. Para acelerar as coisas, crie uma gravação de ação ao executar o teste com o primeiro conjunto de valores de parâmetro e, em seguida, reproduza-a para os outros conjuntos.

  1. Use os Planos de Teste do Azure para executar o teste.

  2. Selecione Criar gravação de ação antes de escolher Iniciar.

  3. Conclua a primeira iteração de teste e, em seguida, passe para a próxima.

  4. Marque cada etapa como aprovada ou reprovada enquanto trabalha. Insira valores de parâmetro no aplicativo exatamente como exibido no script de teste.

  5. Selecione Reproduzir para executar o teste com o próximo conjunto de valores de parâmetro. Suas ações são reproduzidas automaticamente, mas você ainda deve verificar os resultados.

    A gravação e a reprodução não funcionam com todas as aplicações. Para obter mais informações, consulte Configurações e plataformas suportadas para testes codificados de interface do usuário e gravações de ação.