Relatório de amostra de tendência de resumo de teste
Serviços de DevOps do Azure | Azure DevOps Server 2022 | Azure DevOps Server 2020
Os pipelines que incluem tarefas de teste podem ser consultados para criar um relatório de tendência de resumo de teste. Por exemplo, o relatório a seguir exibe o número de execuções de teste reprovadas em cada coluna durante um período de 24 dias, juntamente com o gráfico de linhas mostrando a tendência da taxa de aprovação no teste. Para obter informações sobre como adicionar testes a um pipeline, consulte a seção Recursos da tarefa de teste mais adiante neste artigo.
Especificamente, este artigo fornece consultas de exemplo para gerar os seguintes relatórios:
- Tendência de resumo de teste para fluxo de trabalho de compilação
- Tendência de resumo de teste para fluxo de trabalho de liberação
- Tendência de resumo de teste para um ramo específico
- Tendência de resumo de teste para um arquivo de teste específico
- Tendência de resumo de teste para um proprietário de teste específico.
Importante
A integração do Power BI e o acesso ao feed OData do Serviço de Análise estão geralmente disponíveis para os Serviços de DevOps do Azure e o Azure DevOps Server 2020 e versões posteriores. As consultas de exemplo fornecidas neste artigo são válidas apenas no Azure DevOps Server 2020 e versões posteriores e dependem da versão v3.0-preview ou posterior. Nós encorajamos você a usar essas consultas e nos fornecer feedback.
Pré-requisitos
- Acesso: Ser membro de um projeto com pelo menos acesso Básico .
- Permissões: por predefinição, os membros do projeto têm permissão para consultar o Analytics e criar vistas.
- Para obter mais informações sobre outros pré-requisitos relacionados com a ativação de serviços e funcionalidades e atividades gerais de monitorização de dados, consulte Permissões e pré-requisitos para aceder ao Analytics.
Nota
Este artigo pressupõe que você leia Visão geral de relatórios de exemplo usando consultas OData e tenha uma compreensão básica do Power BI.
Consultas de amostra
Você pode usar as seguintes consultas do conjunto de entidades para criar relatórios de tendência de resumo de teste de TestRuns
pipeline diferentes, mas semelhantes. O TestRuns
conjunto de entidades para as consultas a seguir está disponível somente quando você inclui tarefas de teste em uma definição de pipeline.
Nota
Para determinar as propriedades disponíveis para fins de filtro ou relatório, consulte Referência de metadados para Análise de Planos de Teste e Referência de metadados para Pipelines do Azure. Você pode filtrar suas consultas ou retornar propriedades usando qualquer um dos Property
valores em um EntityType
ou NavigationPropertyBinding Path
valores disponíveis com um EntitySet
. Cada EntitySet
um corresponde a um EntityType
arquivo . Para obter mais informações sobre o tipo de dados de cada valor, revise os metadados fornecidos para o .EntityType
Tendência de resumo de teste para o fluxo de trabalho de compilação
Use as consultas a seguir para exibir a tendência de resumo de teste de um pipeline para um fluxo de trabalho de compilação .
Copie e cole a seguinte consulta do Power BI diretamente na janela Obter Consulta em Branco de Dados>. Para obter mais informações, consulte Visão geral de relatórios de exemplo usando consultas OData.
let
Source = OData.Feed ("https://analytics.dev.azure.com/{organization}/{project}/_odata/v4.0-preview/TestRuns?
$apply=filter("
&"Pipeline/PipelineName eq '{pipelineName}' "
&"and CompletedOn/Date ge {startdate} "
&"and Workflow eq 'Build' "
&") "
&"/groupby( "
&"(CompletedOn/Date), "
&"aggregate( "
&"ResultCount with sum as ResultCount, "
&"ResultPassCount with sum as ResultPassCount, "
&"ResultNotExecutedCount with sum as ResultNotExecutedCount, "
&"ResultNotImpactedCount with sum as ResultNotImpactedCount, "
&"ResultFailCount with sum as ResultFailCount "
&")) "
&"/compute( "
&"iif(ResultCount gt ResultNotExecutedCount, ((ResultPassCount add ResultNotImpactedCount) div cast(ResultCount sub ResultNotExecutedCount, Edm.Decimal)) mul 100, 0) as PassRate) "
,null, [Implementation="2.0",OmitValues = ODataOmitValues.Nulls,ODataVersion = 4])
in
Source
Tendência de resumo de teste para fluxo de trabalho de versão
Use as consultas a seguir para exibir a tendência de resumo de teste de um pipeline definido para um fluxo de trabalho de versão .
Copie e cole a seguinte consulta do Power BI diretamente na janela Obter Consulta em Branco de Dados>. Para obter mais informações, consulte Visão geral de relatórios de exemplo usando consultas OData.
let
Source = OData.Feed ("https://analytics.dev.azure.com/{organization}/{project}/_odata/v4.0-preview/TestRuns?
$apply=filter("
&"Pipeline/PipelineName eq '{pipelineName}' "
&"and CompletedOn/Date ge {startdate} "
&"and Workflow eq 'Release' "
&") "
&"/groupby( "
&"(CompletedOn/Date), "
&"aggregate( "
&"ResultCount with sum as ResultCount, "
&"ResultPassCount with sum as ResultPassCount, "
&"ResultNotExecutedCount with sum as ResultNotExecutedCount, "
&"ResultNotImpactedCount with sum as ResultNotImpactedCount, "
&"ResultFailCount with sum as ResultFailCount "
&")) "
&"/compute( "
&"iif(ResultCount gt ResultNotExecutedCount, ((ResultPassCount add ResultNotImpactedCount) div cast(ResultCount sub ResultNotExecutedCount, Edm.Decimal)) mul 100, 0) as PassRate) "
,null, [Implementation="2.0",OmitValues = ODataOmitValues.Nulls,ODataVersion = 4])
in
Source
Tendência de resumo de teste filtrada por ramificação
Para exibir a tendência de resumo de teste de um pipeline para uma ramificação específica, use as consultas a seguir. Para criar o relatório, execute as seguintes etapas extras juntamente com o que é especificado posteriormente neste artigo.
- Expanda
Branch
paraBranch.BranchName
- Selecione a segmentação de dados de visualização do Power BI e adicione o campo
Branch.BranchName
ao campo da segmentação de dados - Selecione o nome da ramificação na segmentação de dados para a qual você precisa ver o resumo do resultado.
Para obter mais informações sobre como usar segmentações de dados, consulte Segmentações de dados no Power BI.
Copie e cole a seguinte consulta do Power BI diretamente na janela Obter Consulta em Branco de Dados>. Para obter mais informações, consulte Visão geral de relatórios de exemplo usando consultas OData.
let
Source = OData.Feed ("https://analytics.dev.azure.com/{organization}/{project}/_odata/v4.0-preview/TestRuns?
$apply=filter("
&"Pipeline/PipelineName eq '{pipelineName}' "
&"and CompletedOn/Date ge {startdate} "
&"and Workflow eq 'Build' "
&") "
&"/groupby((Branch/BranchName, CompletedOn/Date), "
&"aggregate( "
&"ResultCount with sum as ResultCount, "
&"ResultPassCount with sum as ResultPassCount, "
&"ResultNotExecutedCount with sum as ResultNotExecutedCount, "
&"ResultNotImpactedCount with sum as ResultNotImpactedCount, "
&"ResultFailCount with sum as ResultFailCount "
&")) "
&"/compute( "
&"iif(ResultCount gt ResultNotExecutedCount, ((ResultPassCount add ResultNotImpactedCount) div cast(ResultCount sub ResultNotExecutedCount, Edm.Decimal)) mul 100, 0) as PassRate) "
,null, [Implementation="2.0",OmitValues = ODataOmitValues.Nulls,ODataVersion = 4])
in
Source
Tendência de resumo de teste filtrada por arquivo de teste
Para exibir a tendência de resumo de teste de um pipeline para um arquivo de teste específico, use as consultas a seguir. Para criar o relatório, execute as seguintes etapas extras juntamente com o que é definido posteriormente neste artigo.
- Expanda
Test
paraTest.ContainerName
- Selecione a segmentação de dados de visualização do Power BI e adicione o campo
Test.ContainerName
ao campo da segmentação de dados - Selecione o nome do contêiner na segmentação de dados para o qual você precisa ver o resumo do resultado.
Copie e cole a seguinte consulta do Power BI diretamente na janela Obter Consulta em Branco de Dados>. Para obter mais informações, consulte Visão geral de relatórios de exemplo usando consultas OData.
let
Source = OData.Feed ("https://analytics.dev.azure.com/{organization}/{project}/_odata/v4.0-preview/TestRuns?
$apply=filter("
&"Pipeline/PipelineName eq '{pipelineName}' "
&"and CompletedOn/Date ge {startdate} "
&"and Workflow eq 'Build' "
&") "
&"/groupby((Test/ContainerName, Date/Date), "
&"aggregate( "
&"ResultCount with sum as ResultCount, "
&"ResultPassCount with sum as ResultPassCount, "
&"ResultNotExecutedCount with sum as ResultNotExecutedCount, "
&"ResultNotImpactedCount with sum as ResultNotImpactedCount, "
&"ResultFailCount with sum as ResultFailCount "
&")) "
&"/compute( "
&"iif(ResultCount gt ResultNotExecutedCount, ((ResultPassCount add ResultNotImpactedCount) div cast(ResultCount sub ResultNotExecutedCount, Edm.Decimal)) mul 100, 0) as PassRate) "
,null, [Implementation="2.0",OmitValues = ODataOmitValues.Nulls,ODataVersion = 4])
in
Source
Tendência de resumo de teste filtrada pelo proprietário do teste
Para exibir a tendência de resumo de teste de um pipeline para testes de propriedade de um proprietário de teste específico, use as consultas a seguir. Para criar o relatório, execute as seguintes etapas extras juntamente com o que é definido posteriormente neste artigo.
- Expanda
Test
paraTest.TestOwner
- Selecione a segmentação de dados de visualização do Power BI e adicione o campo
Test.TestOwner
ao campo da segmentação de dados - Selecione o proprietário do teste na segmentação de dados para a qual você precisa ver o resumo do resultado.
Copie e cole a seguinte consulta do Power BI diretamente na janela Obter Consulta em Branco de Dados>. Para obter mais informações, consulte Visão geral de relatórios de exemplo usando consultas OData.
let
Source = OData.Feed ("https://analytics.dev.azure.com/{organization}/{project}/_odata/v4.0-preview/TestRuns?
$apply=filter("
&"Pipeline/PipelineName eq '{pipelineName}' "
&"and CompletedOn/Date ge {startdate} "
&"and Workflow eq 'Build' "
&") "
&"/groupby((Test/TestOwner, Date/Date), "
&"aggregate( "
&"ResultCount with sum as ResultCount, "
&"ResultPassCount with sum as ResultPassCount, "
&"ResultNotExecutedCount with sum as ResultNotExecutedCount, "
&"ResultNotImpactedCount with sum as ResultNotImpactedCount, "
&"ResultFailCount with sum as ResultFailCount "
&")) "
&"/compute( "
&"iif(ResultCount gt ResultNotExecutedCount, ((ResultPassCount add ResultNotImpactedCount) div cast(ResultCount sub ResultNotExecutedCount, Edm.Decimal)) mul 100, 0) as PassRate) "
,null, [Implementation="2.0",OmitValues = ODataOmitValues.Nulls,ODataVersion = 4])
in
Source
Cadeias de caracteres de substituição e detalhamento de consulta
Substitua as seguintes cadeias de caracteres por seus valores. Não inclua parênteses com a {} sua substituição. Por exemplo, se o nome da sua organização for "Fabrikam", substitua {organization}
por Fabrikam
, não {Fabrikam}
.
{organization}
- Nome da sua organização{project}
- O nome do seu projeto de equipa{pipelinename}
- O nome do seu pipeline. Exemplo: pipeline de compilação por hora da Fabrikam{startdate}
A data para iniciar o relatório. Formato: AAAA-MM-DDZ. Exemplo: 2023-01-01Z representa 1 de janeiro de 2023 às 12:50:54. Não coloque entre aspas ou parênteses.
Detalhamento da consulta
A tabela a seguir descreve cada parte da consulta.
Parte da consulta
Descrição
$apply=filter(
Cláusula inicial filter()
.
Pipeline/PipelineName eq '{pipelineName}'
O teste de retorno é executado para o pipeline especificado.
and CompletedOn/Date ge {startdate}
O teste de retorno é executado na data especificada ou após ela.
and Workflow eq 'Build'
O teste de retorno é executado para o pipeline com um fluxo de Build
trabalho
)
Cláusula de encerramento filter()
/groupby(
Cláusula inicial groupby()
.
(CompletedOn/Date),
Agrupar até à data de conclusão da execução do ensaio.
aggregate(
Cláusula inicial aggregate
. Para todas as execuções de teste correspondentes aos critérios de filtro, some a série de contagens.
ResultCount with sum as ResultCount,
Conte o número total de execuções de teste como ResultCount
.
ResultPassCount with sum as ResultPassCount,
Conte o número total de execuções de teste aprovadas como ResultPassCount
.
ResultNotExecutedCount with sum as ResultNotExecutedCount,
Conte o número total de execuções de teste não executadas como ResultNotExecutedCount
.
ResultNotImpactedCount with sum as ResultNotImpactedCount
Conte o número total de execuções de teste não afetadas como ResultNotImpactedCount
.
ResultFailCount with sum as ResultFailCount
Conte o número total de execuções de teste com falha como ResultFailCount
.
))
Fechar aggregate()
e groupby()
cláusulas.
/compute(
Cláusula inicial compute()
.
iif(ResultCount gt ResultNotExecutedCount, ((ResultPassCount add ResultNotImpactedCount) div cast(ResultCount sub ResultNotExecutedCount, Edm.Decimal)) mul 100, 0) as PassRate
Para todos os dias, calcule PassRate
.
)
Cláusula de fechamento compute()
.
(Opcional) Renomear consulta
Você pode renomear o rótulo de consulta padrão, Query1, para algo mais significativo. Basta inserir um novo nome no painel Configurações de consulta.
Expandir a coluna CompletedOn no Power BI
Expanda a CompletedOn
coluna. A expansão da coluna nivela o registro em campos específicos. Para saber como, consulte Transformar dados do Analytics para gerar relatórios do Power BI, Expandir colunas.
Alterar o tipo de dados da coluna
No Editor do Power Query, selecione a PassRate
coluna, selecione Tipo de Dados no menu Transformar e, em seguida, escolha Número Decimal.
Para obter mais informações sobre como alterar o tipo de dados, consulte Transformar dados do Analytics para gerar relatórios do Power BI, Transformar um tipo de dados de coluna.
Feche a consulta e aplique as alterações
Depois de concluir todas as suas transformações de dados, escolha Fechar & Aplicar no menu Início para salvar a consulta e retornar à guia Relatório no Power BI.
Criar o relatório do gráfico de linhas e colunas de pilha
No Power BI, em Visualizações, escolha o gráfico de colunas de linha e pilha e arraste e solte os campos nas áreas do gráfico.
Adicione
CompletedOn.Date
ao eixo X, clique com o botão direito do mouse no campo e selecione Data.Data em vez de Hierarquia de Data.Adicionar
ResultFailCount
ao eixo y da coluna.Adicionar
PassRate
ao eixo y da linha.
Seu relatório deve ser semelhante à imagem a seguir.
Recursos da tarefa de teste
- Executar testes em paralelo usando a tarefa de teste do Visual Studio
- Execute testes em paralelo para qualquer executor de teste
- Acelere os testes usando a Análise de Impacto de Teste (TIA)
- Gerencie testes escamosos
- Considerações sobre testes de interface do usuário
- Teste de carga do Azure
- Referência de tarefa do Azure Pipelines, Tarefas de teste