Microsoft benchmarkresultat för Web IQ

Microsoft Web IQ är utformat för att leverera högkvalitativ grounding med låg svarstid och färre token. Följande benchmark-resultat jämför Web IQ med andra grounding-tjänster.

Tokeneffektivitet

Web IQ bygger på en ny Pareto-kurva av effektivitet. Den prioriterar de mest relevanta avsnitten och minimerar onödig kontext. Den här metoden minskar tokenanvändningen per fråga, resonemangstid och den totala kostnaden för att leverera högkvalitativa svar.

I den uppmätta uppsättningen med 3 000 frågor levererade Web IQ svar av högsta kvalitet med minst antal token i förhållande till de jämförna tjänsterna.

Källa: Globalt produktionsurval med 3 000 sökfrågor. Webbresultatkonfigurationer inkluderade 10, 15 och 20 resultat, med 3 000, 5 000, 10 000 och 20 000 tecken per resultat eller motsvarande.

Jordningsnöjdhet

Web IQ levererar en komplett, strukturerad kontext från webbsidor, nyheter, bilder och video. Den här kontexten förbättrar noggrannheten och konsekvensen för AI-genererade svar.

Service Tillfredsställelse med jordning
Web IQ 79.05
Konkurrent A 75,70
Konkurrent B 75,61
Konkurrent C 73,96
Konkurrent D 72,89
Konkurrent E 67,53
Konkurrent F 64,71

Källa: 3 000 globala blinda sökfrågor som samplas från produktion. Konfigurationen var inställd på 10 resultat och 10 000 tecken per resultat eller motsvarande.

P95-svarstid

Snabb groundning hjälper AI-system att förbli responsiva i agentkedjor i flera steg och vid dynamiska frågor. Att minska svarstiden i varje steg bidrar till sammantagna prestandaförbättringar i komplexa interaktioner.

Service P95-svarstid i millisekunder
Web IQ 164
Konkurrent C 406
Konkurrent E 463
Konkurrent A 726
Konkurrent B 1 007
Konkurrent D 1 930
Konkurrent G 2 090

Web IQ:s uppmätta P95-svarstid var ungefär 2,5 gånger lägre än nästa tjänsts i jämförelsen.

Källa: virtuella datorer som finns i West US 2, North Central US, East US 2, North Europe och South Korea. P95-värden är genomsnittsberäknade över datacenter. Unika frågor gav inga cacheträffar. Konfigurationen använde 10 resultat och 10 000 tecken per resultat.