Acompanhar os resultados do teste

 

Publicado: abril de 2016

Como criar e executar testes, você deseja ser capaz de controlar seu status. Por exemplo, quantos dos testes estão prontos para serem executados, ou a taxa de êxito/falha para testes ou quantos testes foram executados até o momento.

Que opções de relatórios estão lá?

• Gráficos leves (Visual Studio Online ou Team Web Access)

• Consultas (Visual Studio Online ou Team Web Access) do item de trabalho

• Relatórios já existentes no data warehouse (TFS local somente)

• Criar seus próprios relatórios do data warehouse (TFS local somente)

Use gráficos simples para exibir facilmente as respostas para muitas das suas dúvidas sobre status de teste. Esses gráficos podem ser fixados à home page e toda a equipe pode ver o progresso em um relance. (Você deve ter TFS 2013 atualização 4 ou superior para usar gráficos simples com Team Web Access).

Criar e executar consultas de itens de trabalho para gerar relatórios do hub de trabalho. De uma consulta de item de trabalho de lista plana, você também pode gerar um gráfico para a consulta muito. Por exemplo, crie uma consulta para mostrar os bugs ativos e sua prioridade e, em seguida, gerar um gráfico para rapidamente, agrupe esses bugs ativos por prioridade.

Mas se gráficos leves não fornecem os relatórios que você precisa, você pode detalhar os dados se você estiver usando o TFS local. Você pode obter acesso a relatórios existentes nos dados de warehouse ou você pode criar sua própria com o Excel.

Status do teste com gráficos simples

Você pode criar esses gráficos do hub de teste para o Team Web Access ou do Visual Studio Online.

Acompanhar o andamento do teste

Use gráficos de resultados de teste para controlar como o teste será. Escolha um conjunto fixo de campos preenchidos previamente relacionadas aos resultados. Por padrão, um gráfico de pizza é criado para cada plano de teste. Este gráfico é agrupado pelo campo de resultado para mostrar os resultados mais recentes para todos os testes no plano de teste.

Exiba este gráfico padrão da guia gráficos.

Adicione seus próprios gráficos de resultados do teste visualizar o que é importante para sua equipe. Se você já sabe como adicionar um gráfico, saltará para o exemplos abaixo dos gráficos que você pode criar.

1. Selecione o plano de teste ou testar o pacote para o gráfico na guia de plano de teste. Em seguida, crie um novo gráfico.

   

2. Selecione o tipo de gráfico. Com base no gráfico, configure os campos que você deseja usar para agrupar por ou para linhas e colunas.

   

   Todos os gráficos agregar as informações de conjuntos de testes qualquer filho do plano de teste ou conjunto de testes que você selecionou.

3. Salve o gráfico. Agora, ele será exibido na guia gráficos para o plano de teste ou conjunto de testes que você selecionou.

Exemplos de resultados de teste

Qual é o status de teste para um conjunto de testes específicos?

Selecione o conjunto de testes a partir da guia de plano de teste e adicionar um gráfico de pizza de resultados de teste. Agrupar por resultado.

O que é o status do teste de histórias de usuários que minha equipe de teste desse sprint?

Se você tiver criado conjuntos de testes baseados em requisitos no plano de teste para suas histórias de usuários, você pode criar um gráfico para isso.

1. Agrupe esses conjuntos de testes baseados em requisitos juntos em um conjunto de testes estáticos.

2. Selecione o conjunto de testes estáticos no guia de plano de teste.

3. Adicione um gráfico de barras empilhadas teste resultados. Escolha Suite como o dinâmica de linhas e o resultado como dinâmico colunas.

   

Quantos testes tem cada testador para executar?

Selecione o plano de teste a partir da guia de plano de teste e adicionar um gráfico de tabela dinâmica teste resultados. Escolha o testador como a dinâmica de linhas e o resultado como dinâmico colunas.

Como verificar a qualidade com base na configuração?

Use um gráfico de barras empilhadas ou um gráfico de tabela dinâmica. Escolha a configuração como a dinâmica de linhas e o resultado como dinâmico colunas.

Como controlar por testes falharem para minha equipe?

Para análise de falha, use um gráfico de barras empilhadas ou um gráfico de tabela dinâmica. Escolha o testador para o tipo de falha para as colunas e linhas. (Tipo de falha para resultados de teste só pode ser definido usando o Microsoft Test Manager.)

Como posso controlar a resolução devido a falhas de testes para minha equipe?

Para análise de resolução, use um gráfico de barras empilhadas ou um gráfico de tabela dinâmica. Escolha o testador para linhas e resolução para as colunas. (Tipo de resolução para resultados de teste só pode ser definido usando o Microsoft Test Manager.)

Acompanhar o status do caso de teste

Use gráficos de caso de teste para verificar o andamento da criação de casos de teste. Os gráficos para casos de teste oferecem a flexibilidade ao relatório nas colunas que você adiciona à guia testes. Por padrão, os campos de caso de teste não são adicionados ao modo de exibição na guia de testes.

Se você já sabe como adicionar um gráfico, saltará para o exemplos abaixo dos gráficos que você pode criar casos de teste.

1. Adicione os campos que você deseja usar para o gráfico de caso de teste a partir da guia testes com opções de coluna. Em seguida, os campos serão exibidos como opções nas listas suspensas para agrupamento para os gráficos de caso de teste.

2. Selecione o plano de teste ou testar o pacote para o gráfico na guia de plano de teste. Em seguida, adicione um gráfico de caso de teste.

   

   Todos os gráficos agregar as informações de conjuntos de testes qualquer filho do plano de teste ou conjunto de testes que você selecionou.

3. Selecione o tipo de gráfico. Com base no gráfico, configure os campos que você deseja usar para agrupar por, linhas e colunas ou o intervalo (somente para gráficos de tendência).

   

   Você não pode agrupar por conjunto de testes para os gráficos de caso de teste.

4. Salve o gráfico. Agora, ele será exibido na guia gráficos para o plano de teste ou conjunto de testes que você selecionou.

Exemplos de casos de teste

Como acompanhar o progresso para a criação de casos de teste?

Use um gráfico de área empilhada tendências para exibir o progresso de quantos casos de teste está prontos para ser executado. Escolha o estado para a pilha por campo e crescente para o campo de classificação.

Como acompanhar o progresso de status de automação?

Use um gráfico de tendências de área empilhada para exibir o progresso de quantos casos de teste foram automatizados. Escolha o status de automação para a pilha por campo e crescente para o campo de classificação.

Se várias equipes possuem casos de teste no meu plano de teste, posso ver quantos cada equipe possui e as prioridades dos testes?

Se as equipes são organizadas por caminho de área, em seguida, você pode usar um gráfico de pizza de caso de teste. Escolha o caminho Area para o grupo ao campo.

Se você quiser saber as prioridades desses testes, crie um gráfico de barras empilhadas. Escolha um caminho de área de linhas e a prioridade para as colunas.

Como posso acompanhar o status de criação de teste por membros da equipe?

Os proprietários do caso de teste são controlados pelo atribuído ao campo. Use um gráfico de barras empilhadas ou um gráfico de tabela dinâmica. Escolha atribuída ao status para as colunas e linhas.

Perguntas e Respostas

P: posso exibir os resultados de teste recentes para um caso de teste individual?

A: Sim. Selecione o caso de teste dentro de um conjunto de testes e escolha exibir o painel de detalhes do teste.

Exiba os resultados de teste recente para esse caso de teste.

P: como os dados são mostrados nos gráficos para casos de teste que estão em vários conjuntos de testes?

R: para gráficos de caso de teste, se um caso de teste tiver sido adicionado a vários conjuntos de testes em um plano, em seguida, ele será contado uma vez. Para gráficos de resultados de teste, cada instância de um teste é executado é contada para cada um dos conjuntos de teste separadamente.

P: quem pode criar gráficos?

R: deve ter pelo menos uma licença básica para criar gráficos.

P: como posso compartilhar o status do teste da equipe com todos os meus participantes?

R: fixar homepage da sua equipe para toda a equipe exibir um gráfico. Use o menu de contexto do gráfico.

Você deve ser um administrador de equipe para fazer isso. Os membros da equipe até mesmo com licenças de participantes podem exibir os gráficos de teste na home page. Saiba mais sobre a home page aqui. Ou aprender mais sobre Administração da equipe.

P: como editar ou excluir um gráfico?

R: selecione a opção desejada no menu de contexto do gráfico.

Acompanhar bugs com gráficos simples

Também é importante saber quais bugs são encontrados e corrigidos para avaliar a qualidade do seu aplicativo. Qual é a prioridade de todos os bugs ativos? Qual a aparência de tendências de bugs? Você pode gerar gráficos leves para qualquer consulta de lista plana que você cria no hub de trabalho na página de consultas. Saiba como fazer isso com o Team Web Access ou Visual Studio Online aqui.

Perguntas e Respostas

P: você acompanhar os bugs que foram criados especificamente de casos de teste?

R: quando você cria um bug no test runner, ela será automaticamente vinculada ao caso de teste que estavam em execução. Para pesquisar todos os bugs que foram criados a partir de seus casos de teste, abra o Microsoft Test Manager e vá para o teste guia e escolha Verificar Bugs. Para executar novamente o teste de um erro que foi corrigido, selecione Verificar.

Controlar os resultados de teste automatizado com o Microsoft Test Manager

Para ver os gráficos de ensaios recentes, use o Microsoft Test Manager. Você pode abri-lo em qualquer computador no qual foi instalado o Visual Studio Test Professional ou Enterprise do Visual Studio. Conecte-se ao seu plano de teste e projeto de equipe e escolha Centro de Testes.

Para obter uma lista dos ensaios recentes, selecione Testar, Analisar Execuções de Teste. Cada item na lista é uma execução de teste:

O Microsoft Test Manager dá suporte a um processo em que você examina os resultados de teste após a conclusão dos testes. As execuções que incluem testes reprovados são marcadas como Necessita Investigação. Se você abrir os detalhes da execução de teste, poderá adicionar comentários, atribuir um motivo para a falha, criar bugs ou outros itens de trabalho e alterar o sinalizador para Concluído:

Você pode alterar o motivo de tipos de falha, se requisitado pelo seu processo de teste.

Qualidade de compilação do roteiro

Se você tiver o TFS local, você pode usar esse relatório para mostrar a você as taxas de êxito/falha para testes automatizados são executados como parte do processo de compilação. Ele pode mostrar quais são as taxas de passagem para esses testes para cada uma das suas compilações. Você pode ver se ele está melhorando ou não.

Você também precisa SQL Services Reporting Services instalado para o TFS para este relatório.

Preparação de versão de roteiro

Se você tiver o TFS local, você também pode ver o histórico dos quais testes são passando e com falha. Examinar as tendências da taxa de passagem para determinar quando você pensa que você estará pronto para lançamento com esse relatório. Veja se a qualidade do seu aplicativo está melhorando ao executar seus testes.

Você também precisa SQL Services Reporting Services instalado para o TFS para este relatório.

Relatórios personalizados para o TFS local somente

Você precisa de SQL Services Reporting Services instalado para o TFS para relatórios personalizados.

Se você tiver o TFS local, planos de teste e testar conjuntos são itens de trabalho com o TFS 2013 atualização 3 ou posterior. Você pode criar seus próprios relatórios do Excel de uma consulta com base em suas necessidades de planos de teste, conjuntos de testes, casos de teste, histórias de usuários, requisitos e bugs. Saiba como criar um relatório do Excel para uma consulta de lista plana aqui.

Você pode personalizar ainda mais se seu portal de projeto de equipe é configurado com o SharePoint Server Enterprise Edition. Nesse caso, você pode usar relatórios do Excel para criar um painel.

Se você ainda não tiver o relatório que você precisa, há mais opções para exibir os dados diretamente. Descubra outras maneiras que você pode criar relatórios usando o Online analítico de processamento de cubo de dados (OLAP) (TFS_Analysis), que é otimizado para emissão de relatórios, ou você pode usar o banco de dados do data warehouse relacional (TFS_Warehouse) para criar relatórios. Saiba como fazer isso aqui.

Perguntas e Respostas

P: há relatórios que posso usar se eu não tiver o TFS 2013 atualização 4 para os gráficos simples?

R: se a instalação do TFS local inclui serviços de relatório, você pode exibir o gráfico progresso do plano de teste, que mostra quantos testes deste sprint foram aprovados ou reprovados. Abra http://<seu Team Foundation Server>/Relatórios e navegue para TfsReports > DefaultCollection > seu projeto > Tests. Como alternativa, em Visual Studio, em Team Explorer, abra Relatório.

P: posso ver um resumo dos resultados dos testes mais recentes do MTM?

A: Sim. No MTM, vá para o Planejar guia e escolha resultados. Você pode ver os resultados por conjunto para ver se cada história de usuário passou em seus testes.