Definir critérios de falha para testes de carga usando o Teste de Carga do Azure
Neste artigo, você aprenderá a definir critérios de falha ou critérios de parada automática para seus testes de carga com o Teste de Carga do Azure. Com os critérios de falha, você define as expectativas de desempenho e qualidade do aplicativo sob carga. O Teste de Carga do Azure dá suporte a várias métricas de cliente para definir critérios de falha, como taxa de erro ou tempo de resposta. Os critérios de parada automática permitem que você interrompa automaticamente o teste de carga quando a taxa de erro ultrapassa um determinado limite.
Pré-requisitos
- Uma conta do Azure com uma assinatura ativa. Se você não tiver uma assinatura do Azure, crie uma conta gratuita antes de começar.
- Um recurso de teste de carga do Azure. Se precisar criar um recurso de Teste de Carga do Azure, consulte o início rápido Criar e executar um teste de carga.
Critérios de falha do teste de carga
Os critérios de falha do teste de carga são condições que ele deve atender com relação às métricas do cliente. Os critérios de teste são definidos no nível do teste de carga no Teste de Carga do Azure. Um teste de carga pode ter um ou mais critérios de teste. Quando pelo menos um dos critérios de teste é avaliado como verdadeiro, o teste de carga obtém o status de falha.
É possível definir critérios de teste em dois níveis. Um teste de carga pode combinar critérios nos diferentes níveis.
- No nível do teste de carga. Por exemplo, para garantir que a porcentagem total de erros não exceda um limite.
- No nível da solicitação JMeter (amostra JMeter). Por exemplo, você pode especificar um limite de tempo de resposta da solicitação getProducts, mas desconsiderar o tempo de resposta da solicitação de entrada.
Você pode definir um máximo de 50 critérios de teste para um teste de carga. Se houver vários critérios para a mesma métrica do cliente, o critério com o valor de limite mais baixo será usado.
Estrutura dos critérios de falha
O formato dos critérios de falha no Teste de Carga do Azure é igual ao de uma instrução condicional para uma métrica com suporte. Por exemplo, certifique-se de que o número médio de solicitações por segundo seja maior que 500.
Os critérios de falha têm a seguinte estrutura:
- Critérios de teste no nível do teste de carga:
Aggregate_function (client_metric) condition threshold. - Critérios de teste aplicados a solicitações JMeter específicas:
Request: Aggregate_function (client_metric) condition threshold.
A tabela a seguir descreve os diferentes componentes:
| Parâmetro | Descrição |
|---|---|
Client metric |
Obrigatórios. A métrica do cliente na qual a condição deve ser aplicada. |
Aggregate function |
Obrigatórios. A função de agregação a ser aplicada à métrica do cliente. |
Condition |
Obrigatórios. O operador de comparação, como greater than ou less than. |
Threshold |
Obrigatórios. O valor numérico a ser comparado com a métrica do cliente. |
Request |
Opcional. Nome do amostrador no script JMeter ao qual o critério se aplica. Se você não especificar um nome de solicitação, o critério se aplicará à agregação de todas as solicitações no script. Não inclua nenhum dado pessoal no nome do sampler no script do JMeter. Os nomes de exemplo aparecem no painel de resultados do Teste de Carga do Azure. |
Métricas de cliente com suporte para critérios de falha
O Teste de Carga do Azure dá suporte às seguintes métricas de cliente:
| Métrica | Função de agregação | Limite | Condição | Descrição |
|---|---|---|---|---|
response_time_ms |
avg (média)min (mínimo)max (máximo)pxx (percentil), xx pode ser 50, 90, 95, 99 |
Valor inteiro, representando o número de milissegundos (ms). | > (maior que)< (menor que) |
Tempo de resposta ou tempo decorrido, em milissegundos. Saiba mais sobre o tempo decorrido na documentação do Apache JMeter. |
latency |
avg (média)min (mínimo)max (máximo)pxx (percentil), xx pode ser 50, 90, 95, 99 |
Valor inteiro, representando o número de milissegundos (ms). | > (maior que)< (menor que) |
Latência em milissegundos. Saiba mais sobre a latência na documentação do Apache JMeter. |
error |
percentage |
Valor numérico no intervalo de 0 a 100, representando uma porcentagem. | > (maior que) |
Porcentagem de solicitações com falha. |
requests_per_sec |
avg (média) |
Valor numérico com até duas casas decimais. | > (maior que) < (menor que) |
Número de solicitações por segundo. |
requests |
count |
Valor inteiro. | > (maior que) < (menor que) |
Número total de solicitações. |
Definir os critérios de falha do teste de carga
Nesta seção, você configura critérios de teste para um teste de carga no portal do Azure.
No portal do Azure, acesse seu recurso de Teste de Carga do Azure.
No painel esquerdo, selecione Testes para exibir a lista de testes de carga.
Selecione o teste de carga na lista e clique em Editar.
No painel Critérios de teste, preencha os valores de Métrica, Função de agregação, Condição e Limite do teste.
Opcionalmente, insira as informações de Nome da solicitação para adicionar um critério de teste a uma solicitação JMeter específica. O valor deve corresponder ao nome da amostra JMeter no arquivo JMX.
Escolha Aplicar para salvar as alterações.
Agora, quando você executar o teste de carga, o Teste de Carga do Azure usará os critérios de teste para determinar o status da execução.
Execute o teste e veja o status no painel do teste de carga.
O painel mostra cada um dos critérios de teste e o respectivo status. O status geral do teste será reprovado se pelo menos um critério for atendido.
Configuração de parada automática
O Teste de Carga do Azure interrompe automaticamente um teste de carga se a porcentagem de erro exceder um determinado limite para uma determinada janela de tempo. Parar automaticamente impede que testes com falha incorram em ainda mais custos, por exemplo, devido a uma URL de ponto de extremidade configurada incorretamente.
Na configuração de teste de carga, você pode habilitar ou desabilitar a funcionalidade de parada automática e configurar o limite de porcentagem de erro e a janela de tempo. Por padrão, o Teste de Carga do Azure interrompe automaticamente um teste de carga que tenha uma porcentagem de erro de pelo menos 90% durante qualquer janela de tempo de 60 segundos.
Você pode usar a funcionalidade de parada automática do Teste de Carga do Azure em combinação com um ouvinte de Parada Automática em seu script JMeter. O teste de carga pára automaticamente quando um dos critérios na configuração de parada automática ou no ouvinte de parada automática do JMeter é atendido.
Cuidado
Se você desabilitar a parada automática para o teste de carga, poderá incorrer em custos mesmo quando o teste de carga estiver configurado incorretamente.
Para configurar a parada automática para seu teste de carga no portal do Azure:
No portal do Azure, acesse seu recurso de Teste de Carga do Azure.
No painel esquerdo, selecione Testes para exibir a lista de testes de carga.
Selecione o teste de carga na lista e clique em Editar. Como alternativa, selecione Criar>upload de um script JMeter para criar um novo teste.
Vá para a guia Critérios de teste para configurar a funcionalidade de parada automática.
Habilite ou desabilite a interrupção automática do teste de carga usando o controle de teste de parada automática.
Se você habilitar a parada automática, poderá preencher os campos Porcentagem de erro e Janela de tempo. Especifique a janela de tempo em segundos.
Selecione Aplicar ou Revisar + criar se estiver criando um novo teste de carga, para salvar as alterações.
Próximas etapas
Para saber como parametrizar um teste de carga usando segredos, confira Parametrizar um teste de carga.
Para saber mais sobre a automação do teste de desempenho, confira Configurar o teste de desempenho automatizado.
Comentários
Em breve: Ao longo de 2024, eliminaremos os problemas do GitHub como o mecanismo de comentários para conteúdo e o substituiremos por um novo sistema de comentários. Para obter mais informações, consulte https://aka.ms/ContentUserFeedback.
Enviar e exibir comentários de