Resultados de benchmark do Microsoft Web IQ

Microsoft Web IQ foi projetado para fornecer embasamento de alta qualidade com baixa latência e menos tokens. Os resultados de benchmark a seguir comparam o Web IQ com outros serviços de grounding.

Eficiência do token

Web IQ opera em uma nova curva de Pareto de eficiência. Ele prioriza as passagens mais relevantes e minimiza o contexto desnecessário. Essa abordagem reduz o uso de token por consulta, o tempo de raciocínio e o custo total de fornecer respostas de alta qualidade.

No conjunto medido de 3.000 consultas, o Web IQ entregou as respostas de maior qualidade com o menor número de tokens em relação aos serviços comparados.

Fonte: exemplo de produção global de 3.000 consultas. As configurações de resultados da Web incluíram 10, 15 e 20 resultados, com 3.000, 5.000, 10.000 e 20.000 caracteres por resultado ou o equivalente.

Satisfação com o embasamento

O IQ da Web fornece contexto completo e estruturado de páginas da Web, notícias, imagens e vídeo. Esse contexto melhora a precisão e a consistência das respostas geradas por IA.

Service Satisfação com o embasamento
QI da Web 79,05
Concorrente A 75,70
Concorrente B 75,61
Concorrente C 73,96
Concorrente D 72,89
Concorrente E 67,53
Concorrente F 64,71

Fonte: 3.000 consultas cegas globais amostradas da produção. A configuração usou 10 resultados e 10.000 caracteres por resultado ou o equivalente.

Latência P95

O grounding rápido ajuda os sistemas de IA a permanecerem responsivos entre cadeias de agentes de várias etapas e consultas dinâmicas. Reduzir a latência em cada etapa potencializa os ganhos de desempenho em interações complexas.

Service Latência P95 em milissegundos
QI da Web 164
Concorrente C 406
Concorrente E 463
Concorrente A 726
Concorrente B 1.007
Concorrente D 1.930
Concorrente G 2.090

A latência P95 medida do Web IQ foi aproximadamente 2,5 vezes mais rápida do que o próximo serviço na comparação.

Fonte: Máquinas virtuais hospedadas no Oeste dos EUA 2, Centro-Norte dos EUA, Leste dos EUA 2, Norte da Europa e Coreia do Sul. Os valores P95 são calculados pela média entre datacenters. Consultas exclusivas evitaram hits no cache. A configuração usou 10 resultados e 10.000 caracteres por resultado.