Definir critérios de falha para testes de carga usando o Teste de Carga do Azure
Neste artigo, você aprenderá a definir critérios de falha ou critérios de parada automática para seus testes de carga com o Teste de Carga do Azure. Os critérios de reprovação permitem definir expectativas de desempenho e qualidade para seu aplicativo sob carga. O Teste de Carga do Azure dá suporte a várias métricas de cliente para definir critérios de falha, como taxa de erro ou tempo de resposta. Os critérios de paragem automática permitem-lhe parar automaticamente o teste de carga quando a taxa de erro ultrapassa um determinado limite.
Pré-requisitos
- Uma conta do Azure com uma subscrição ativa. Se não tiver uma subscrição do Azure, crie uma conta gratuita antes de começar.
- Um recurso de teste de carga do Azure. Se você precisar criar um recurso de teste de carga do Azure, consulte o guia de início rápido Criar e executar um teste de carga.
Critérios de reprovação no teste de carga
Os critérios de reprovação do teste de carga são condições para métricas do lado do cliente, que seu teste deve atender. Você define critérios de teste no nível de teste de carga no Teste de Carga do Azure. Um teste de carga pode ter um ou mais critérios de teste. Quando pelo menos um dos critérios de teste é avaliado como verdadeiro, o teste de carga obtém o status de falha .
Você pode definir critérios de teste em dois níveis. Um teste de carga pode combinar critérios nos diferentes níveis.
- Ao nível do ensaio de carga. Por exemplo, para garantir que a percentagem de erro total não exceda um limite.
- No nível de solicitação JMeter (amostrador JMeter). Por exemplo, você pode especificar um limite de tempo de resposta da solicitação getProducts , mas desconsiderar o tempo de resposta da solicitação de login .
Você pode definir um máximo de 50 critérios de teste para um teste de carga. Se houver vários critérios para a mesma métrica do cliente, o critério com o menor valor de limite será usado.
Estrutura dos critérios de reprovação
O formato dos critérios de falha no Teste de Carga do Azure segue o de uma instrução condicional para uma métrica com suporte. Por exemplo, certifique-se de que o número médio de pedidos por segundo é superior a 500.
Os critérios de reprovação têm a seguinte estrutura:
- Critérios de ensaio ao nível do ensaio de carga:
Aggregate_function (client_metric) condition threshold. - Critérios de teste aplicados a solicitações JMeter específicas:
Request: Aggregate_function (client_metric) condition threshold.
A tabela a seguir descreve os diferentes componentes:
| Parâmetro | Description |
|---|---|
Client metric |
Obrigatório. A métrica do cliente na qual a condição deve ser aplicada. |
Aggregate function |
Obrigatório. A função de agregação a ser aplicada na métrica do cliente. |
Condition |
Obrigatório. O operador de comparação, como greater than, ou less than. |
Threshold |
Obrigatório. O valor numérico a ser comparado com a métrica do cliente. |
Request |
Opcional. Nome do amostrador no script JMeter ao qual o critério se aplica. Se você não especificar um nome de solicitação, o critério se aplicará à agregação de todas as solicitações no script. Não inclua nenhum dado pessoal no nome do amostrador no script JMeter. Os nomes dos amostradores aparecem no painel de resultados do Teste de Carga do Azure. |
Métricas de cliente suportadas para critérios de falha
O Teste de Carga do Azure dá suporte às seguintes métricas de cliente:
| Metric | Função agregar | Threshold | Condição | Description |
|---|---|---|---|---|
response_time_ms |
avg (média)min (mínimo)max (máximo)pxx (percentil), xx pode ser 50, 90, 95, 99 |
Valor inteiro, representando o número de milissegundos (ms). | > (maior que)< (menos que) |
Tempo de resposta ou tempo decorrido, em milissegundos. Saiba mais sobre o tempo decorrido na documentação do Apache JMeter. |
latency |
avg (média)min (mínimo)max (máximo)pxx (percentil), xx pode ser 50, 90, 95, 99 |
Valor inteiro, representando o número de milissegundos (ms). | > (maior que)< (menos que) |
Latência, em milissegundos. Saiba mais sobre latência na documentação do Apache JMeter. |
error |
percentage |
Valor numérico no intervalo 0-100, representando uma percentagem. | > (maior que) |
Percentagem de pedidos falhados. |
requests_per_sec |
avg (média) |
Valor numérico com até duas casas decimais. | > (maior que) < (menos que) |
Número de pedidos por segundo. |
requests |
count |
Valor inteiro. | > (maior que) < (menos que) |
Número total de pedidos. |
Definir critérios de falha no teste de carga
Nesta seção, você configura critérios de teste para um teste de carga no portal do Azure.
No portal do Azure, vá para seu recurso de Teste de Carga do Azure.
No painel esquerdo, selecione Testes para exibir a lista de testes de carga.
Selecione o teste de carga na lista e, em seguida, selecione Editar.
No painel Critérios de teste, preencha os valores Métrica, Função agregada, Condição e Limite para o teste.
Opcionalmente, insira as informações de nome da solicitação para adicionar um critério de teste para uma solicitação JMeter específica. O valor deve corresponder ao nome do amostrador JMeter no arquivo JMX.
Selecione Aplicar para salvar as alterações.
Quando você executa o teste de carga, o Teste de Carga do Azure usa os critérios de teste para determinar o status da execução do teste de carga.
Execute o teste e visualize o status no painel de teste de carga.
O painel mostra cada um dos critérios de teste e seu status. O estado geral do teste é reprovado se pelo menos um critério foi cumprido.
Configuração de parada automática
O Teste de Carga do Azure interrompe automaticamente um teste de carga se a percentagem de erro exceder um determinado limite para uma determinada janela de tempo. A interrupção automática protege você contra falhas em testes que incorram em custos adicionais, por exemplo, devido a uma URL de ponto de extremidade configurada incorretamente.
Na configuração de teste de carga, você pode habilitar ou desabilitar a funcionalidade de parada automática e configurar o limite de porcentagem de erro e a janela de tempo. Por padrão, o Teste de Carga do Azure interrompe automaticamente um teste de carga que tenha uma porcentagem de erro de pelo menos 90% durante qualquer janela de tempo de 60 segundos.
Você pode usar a funcionalidade de parada automática do Teste de Carga do Azure em combinação com um ouvinte de AutoStop em seu script JMeter. O teste de carga para automaticamente quando um dos critérios na configuração de parada automática ou no ouvinte JMeter AutoStop é atendido.
Atenção
Se você desabilitar a parada automática para o teste de carga, poderá incorrer em custos mesmo quando o teste de carga estiver configurado incorretamente.
Para configurar a parada automática para seu teste de carga no portal do Azure:
No portal do Azure, vá para seu recurso de Teste de Carga do Azure.
No painel esquerdo, selecione Testes para exibir a lista de testes de carga.
Selecione o teste de carga na lista e, em seguida, selecione Editar. Como alternativa, selecione Criar>upload de um script JMeter para criar um novo teste.
Vá para a guia Critérios de teste para configurar a funcionalidade de parada automática.
Habilite ou desabilite a parada automática do teste de carga usando o controle de teste de parada automática.
Se ativar a paragem automática, pode preencher os campos Percentagem de erro e Janela Tempo. Especifique a janela de tempo em segundos.
Selecione Aplicar ou Rever + criar se estiver a criar um novo teste de carga para guardar as alterações.
Próximos passos
Para saber como parametrizar um teste de carga usando segredos, consulte Parametrizar um teste de carga.
Para saber mais sobre a automação de testes de desempenho, consulte Configurar testes de desempenho automatizados.
Comentários
Brevemente: Ao longo de 2024, vamos descontinuar progressivamente o GitHub Issues como mecanismo de feedback para conteúdos e substituí-lo por um novo sistema de feedback. Para obter mais informações, veja: https://aka.ms/ContentUserFeedback.
Submeter e ver comentários