Relatório de exemplo de tendência de execução de teste manual
Azure DevOps Services | Azure DevOps Server 2022 | Azure DevOps Server 2020
Este artigo mostra como obter o estado de execução de um ou mais planos de teste no Power BI. O relatório gerado é semelhante à imagem a seguir e ao gráfico de tendência de resultado do relatório de progresso.
O relatório exibe um gráfico de tendências que resume o número e os estados de resultado dos Planos de Teste executados durante um período de tempo especificado.
- Aprovado: Número de casos de teste aprovados.
- Falha: número de casos de teste com falha.
- NotApplicable: Número de casos de teste
- Bloqueado: Número de casos de teste bloqueados para execução.
- NotExecuted: Número de casos de teste definidos, mas não executados.
Perguntas que o relatório responde
Este relatório ajuda você a acompanhar o progresso da equipe em relação aos testes planejados de seu produto ou serviço, respondendo às seguintes perguntas:
- Quantos testes foram concluídos?
- Qual é o status atual dos testes aprovados, reprovados ou bloqueados?
- Quantos testes estão passando e o que a tendência indica sobre qualidade de software?
- Quantos testes estão falhando?
- Quantos testes estão bloqueados e o que a tendência indica?
Um relatório de tendência de execução de teste íntegro mostra um progresso constante nos planos de teste em execução e aprovação. Idealmente, o relatório mostra um número relativamente estável de casos de teste para um determinado plano. À medida que o ciclo de desenvolvimento avança, o número de casos de teste aprovados deve aumentar, e o número de casos de teste em outros estados deve diminuir.
Importante
A integração do Power BI e o acesso ao feed OData do Serviço de Análise estão geralmente disponíveis para os Serviços de DevOps do Azure e o Servidor de DevOps do Azure 2020 e versões posteriores. As consultas de exemplo fornecidas neste artigo são válidas somente em relação ao Azure DevOps Server 2020 e versões posteriores e dependem da versão v3.0-preview ou posterior. Encorajamos você a usar essas consultas e nos fornecer comentários.
Pré-requisitos
- Para exibir dados do Analytics e consultar o serviço, você precisa ser membro de um projeto com acesso básico ou superior. Por padrão, todos os membros do projeto recebem permissões para consultar Análise e definir exibições do Analytics.
- Para saber mais sobre outros pré-requisitos relacionados à habilitação de serviço e recursos e atividades gerais de acompanhamento de dados, consulte Permissões e pré-requisitos para acessar o Analytics.
Observação
Este artigo pressupõe que você tenha lido Visão geral de relatórios de exemplo usando consultas OData e tenha uma compreensão básica do Power BI.
Para que o relatório gere dados úteis, a equipe deve realizar as seguintes atividades para gerenciar planos de teste:
Defina planos de teste, conjuntos de testes e casos de teste. Especifique seu estado. Para que um conjunto de testes seja executado, ele deve estar no estado Em andamento. Para que um Caso de Teste seja executado, ele deve estar no estado Pronto. Para obter detalhes, consulte Criar planos de teste e conjuntos de testes e Criar casos de teste manuais.
Execute testes manuais e verifique os resultados. Marque os resultados de cada etapa de validação no caso de teste como aprovados ou reprovados. Para obter detalhes, consulte Executar testes manuais.
Observação
Os testadores devem marcar uma etapa de teste com um status se for uma etapa de teste de validação. O resultado geral de um teste reflete o status de todas as etapas de teste que foram marcadas. Portanto, o teste terá um status de falha se qualquer etapa de teste for marcada como falha ou não marcada.
Consultas de exemplo
Você pode usar as seguintes consultas do conjunto de entidades para criar relatórios de tendência de execução de plano de TestPointHistorySnapshot teste diferentes, mas semelhantes.
Observação
Para determinar as propriedades disponíveis para fins de filtro ou relatório, consulte Referência de metadados para análise de planos de teste. Você pode filtrar suas consultas ou retornar propriedades usando qualquer um dos Property valores em um EntityType ou NavigationPropertyBinding Path valores disponíveis com um EntitySet. Cada EntitySet corresponde a um EntityType. Para saber mais sobre o tipo de dados de cada valor, examine os metadados fornecidos para o correspondente EntityType.
Você pode colar a consulta do Power BI listada abaixo diretamente na janela Obter Consulta em Branco de> Dados . Para obter mais informações, examine Visão geral de relatórios de exemplo usando consultas OData.
let
Source = OData.Feed ("https://analytics.dev.azure.com/{organization}/{project}/_odata/v3.0-preview/TestPointHistorySnapshot?"
&"$apply=filter((TestSuite/TestPlanTitle eq '{testPlanTitle}') and (DateSK ge {startDate} and DateSK le {endDate}))"
&"/groupby("
&"(DateSK),"
&"aggregate("
&"$count as TotalCount,"
&"cast(ResultOutcome eq 'Passed', Edm.Int32) with sum as Passed,"
&"cast(ResultOutcome eq 'Failed', Edm.Int32) with sum as Failed,"
&"cast(ResultOutcome eq 'Blocked', Edm.Int32) with sum as Blocked,"
&"cast(ResultOutcome eq 'NotApplicable', Edm.Int32) with sum as NotApplicable,"
&"cast(ResultOutcome eq 'None', Edm.Int32) with sum as NotExecuted,"
&"cast(ResultOutcome ne 'None', Edm.Int32) with sum as Executed
)
)", null, [Implementation="2.0"])
in
Source
Cadeias de caracteres de substituição e detalhamento de consulta
Substitua as cadeias de caracteres a seguir pelos valores. Não inclua colchetes {} com sua substituição. Por exemplo, se o nome da sua organização for "Fabrikam", substitua por {organization}Fabrikam, não {Fabrikam}.
{organization}- Nome da sua organização{project}- O nome do projeto da sua equipe, ou omitir "/{project}" completamente, para uma consulta entre projetos{testPlanTitle}- Título do seu plano de testes. Exemplo:Fabrikam test plan.{startDate}e{endDate}- Intervalo de datas de interesse. Você pode inserir as datas no formato AAAAMMDD. Por exemplo,20220815para 15 de agosto de 2022.
Detalhamento da consulta
A tabela a seguir descreve cada parte da consulta.
Parte da consulta
Descrição
filter((TestSuite/TestPlanTitle eq '{testPlanTitle}'))
Retornar dados somente para o plano de teste selecionado. Você pode adicionar vários planos com uma cláusula como filter((TestSuite/TestPlanTitle eq '{testPlanTitle1}' ou TestSuite/TestPlanTitle eq '{testPlanTitle2}')). Você também pode aplicar quaisquer outros filtros relacionados a conjuntos de testes e configurações de teste aqui.
and (DateSK ge {startDate} and DateSK le {endDate})
Intervalo de datas de interesse. Você pode inserir as datas no YYYYMMDD formato.
/groupby((DateSK)
Agrupe os dados em compartimentos da mesma data. Ele produz um conjunto de valores por dia em determinado intervalo de datas.
/aggregate($count as TotalCount,
Agregar dados nos pontos de teste filtrados com contagem como TotalCount.
cast(LastResultOutcome eq 'Passed', Edm.Int32) with sum as Passed,
Ao agregar, os pontos de teste de type-cast com o resultado de execução mais recente 'Passed' para 1 e os somam como Passed métrica.
(Opcional) Renomear consulta
Você pode renomear o rótulo de consulta padrão, Query1, para algo mais significativo. Basta inserir um novo nome no painel Configurações de Consulta .
Alterar o tipo de dados da coluna
No Editor do Power Query, selecione a TotalCount coluna e todas as outras colunas, selecione Tipo de Dados no menu Transformar e escolha Número Inteiro. Para saber mais sobre como alterar o tipo de dados, consulte Transformar dados do Analytics para gerar relatórios do Power BI, Transformar um tipo de dados de coluna.
(Opcional) Renomear campos de coluna
Você pode renomear campos de coluna. Por exemplo, você pode renomear a coluna NotApplicable para Not Applicable, ou TotalCount para Total Count. Para saber como, consulte Renomear campos de coluna.
Feche a consulta e aplique suas alterações
Depois de concluir todas as transformações de dados, escolha Fechar & Aplicar no menu Página Inicial para salvar a consulta e retornar à guia Relatório no Power BI.
Criar o relatório de gráfico de área empilhada
No Power BI, em Visualizações, escolha o relatório Gráfico de área empilhada.
Arraste e solte DateSK no eixo X.
Arraste e solte Passed, Failed, Blocked, NotApplicable e NotExecuted no eixo Y.
Seu relatório deve ser semelhante à imagem a seguir.
Artigos relacionados
Comentários
Em breve: Ao longo de 2024, eliminaremos os problemas do GitHub como o mecanismo de comentários para conteúdo e o substituiremos por um novo sistema de comentários. Para obter mais informações, consulte https://aka.ms/ContentUserFeedback.
Enviar e exibir comentários de