FluencyEvaluator Classe

Définition

Espace de noms:

Microsoft.Extensions.AI.Evaluation.Quality

Assembly:

Microsoft.Extensions.AI.Evaluation.Quality.dll

Paquet:

Microsoft.Extensions.AI.Evaluation.Quality v10.9.0

Source:

FluencyEvaluator.cs

Qui IEvaluator évalue la « fluency » d’une réponse produite par un modèle IA.

public ref class FluencyEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluator

public sealed class FluencyEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluator

type FluencyEvaluator = class
    interface IEvaluator

Public NotInheritable Class FluencyEvaluator
Implements IEvaluator

Héritage

Object

FluencyEvaluator

Implémente

IEvaluator

Remarques

FluencyEvaluator mesure la mesure dans laquelle la réponse évaluée est linguistiquement correcte (c’est-à-dire conforme aux règles grammaticales, aux structures syntaxiques et à l’utilisation appropriée du vocabulaire). Elle retourne un NumericMetric score qui contient un score pour « Fluency ». Le score est un nombre compris entre 1 et 5, avec 1 indiquant un score médiocre, et 5 indiquant un excellent score.

Note:FluencyEvaluator est un évaluateur basé sur l’IA qui utilise un modèle IA pour effectuer son évaluation. Bien que l’invite utilisée par cet évaluateur pour effectuer son évaluation soit conçue pour être indépendante du modèle, les performances de cette invite (et de l’évaluation résultante) peuvent varier en fonction du modèle utilisé et peuvent être particulièrement médiocres lorsqu’un modèle plus petit/local est utilisé.

L’invite qui FluencyEvaluator utilise a été testée sur (et paramétrée pour fonctionner correctement avec) les modèles suivants. Par conséquent, l’utilisation de cet évaluateur avec un modèle de la liste suivante est susceptible de produire les meilleurs résultats. (Le modèle à utiliser peut être configuré via ChatClient.)

GPT-4o

Constructeurs

Nom	Description
FluencyEvaluator()	Qui IEvaluator évalue la « fluency » d’une réponse produite par un modèle IA.

Propriétés

Nom	Description
EvaluationMetricNames	Obtient les Names des EvaluationMetrics produites par ce IEvaluator.
FluencyMetricName	Obtient le Name résultat NumericMetric retourné par FluencyEvaluator.

Méthodes

Nom	Description
EvaluateAsync(IEnumerable<ChatMessage>, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)	Évalue l’élément fourni modelResponse et retourne un EvaluationResult ou plusieurs EvaluationMetrics contenant.

Méthodes d’extension

Nom	Description
EvaluateAsync(IEvaluator, ChatMessage, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)	Évalue l’élément fourni modelResponse et retourne un EvaluationResult ou plusieurs EvaluationMetrics contenant.
EvaluateAsync(IEvaluator, ChatMessage, ChatMessage, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)	Évalue l’élément fourni modelResponse et retourne un EvaluationResult ou plusieurs EvaluationMetrics contenant.
EvaluateAsync(IEvaluator, ChatMessage, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)	Évalue l’élément fourni modelResponse et retourne un EvaluationResult ou plusieurs EvaluationMetrics contenant.
EvaluateAsync(IEvaluator, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)	Évalue l’élément fourni modelResponse et retourne un EvaluationResult ou plusieurs EvaluationMetrics contenant.
EvaluateAsync(IEvaluator, String, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)	Évalue l’élément fourni modelResponse et retourne un EvaluationResult ou plusieurs EvaluationMetrics contenant.
EvaluateAsync(IEvaluator, String, String, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)	Évalue l’élément fourni modelResponse et retourne un EvaluationResult ou plusieurs EvaluationMetrics contenant.