ToolCallAccuracyEvaluator.EvaluateAsync Метод
Определение
Важно!
Некоторые сведения относятся к предварительной версии продукта, в которую до выпуска могут быть внесены существенные изменения. Майкрософт не предоставляет никаких гарантий, явных или подразумеваемых, относительно приведенных здесь сведений.
Вычисляет предоставленный modelResponse и возвращает EvaluationResult содержащий один или несколько EvaluationMetrics.
public System.Threading.Tasks.ValueTask<Microsoft.Extensions.AI.Evaluation.EvaluationResult> EvaluateAsync(System.Collections.Generic.IEnumerable<Microsoft.Extensions.AI.ChatMessage> messages, Microsoft.Extensions.AI.ChatResponse modelResponse, Microsoft.Extensions.AI.Evaluation.ChatConfiguration? chatConfiguration = default, System.Collections.Generic.IEnumerable<Microsoft.Extensions.AI.Evaluation.EvaluationContext>? additionalContext = default, System.Threading.CancellationToken cancellationToken = default);
abstract member EvaluateAsync : seq<Microsoft.Extensions.AI.ChatMessage> * Microsoft.Extensions.AI.ChatResponse * Microsoft.Extensions.AI.Evaluation.ChatConfiguration * seq<Microsoft.Extensions.AI.Evaluation.EvaluationContext> * System.Threading.CancellationToken -> System.Threading.Tasks.ValueTask<Microsoft.Extensions.AI.Evaluation.EvaluationResult>
override this.EvaluateAsync : seq<Microsoft.Extensions.AI.ChatMessage> * Microsoft.Extensions.AI.ChatResponse * Microsoft.Extensions.AI.Evaluation.ChatConfiguration * seq<Microsoft.Extensions.AI.Evaluation.EvaluationContext> * System.Threading.CancellationToken -> System.Threading.Tasks.ValueTask<Microsoft.Extensions.AI.Evaluation.EvaluationResult>
Public Function EvaluateAsync (messages As IEnumerable(Of ChatMessage), modelResponse As ChatResponse, Optional chatConfiguration As ChatConfiguration = Nothing, Optional additionalContext As IEnumerable(Of EvaluationContext) = Nothing, Optional cancellationToken As CancellationToken = Nothing) As ValueTask(Of EvaluationResult)
Параметры
- messages
- IEnumerable<ChatMessage>
Журнал бесед, включая запрос, который создал предоставленный modelResponseобъект.
- modelResponse
- ChatResponse
Ответ, который необходимо оценить.
- chatConfiguration
- ChatConfiguration
Значение ChatConfiguration , указывающее IChatClient , что следует использовать, если для выполнения оценки используется одна или несколько составных IEvaluatorмоделей ИИ.
- additionalContext
- IEnumerable<EvaluationContext>
Дополнительные контекстные сведения (помимо того, что доступно в messages), что IEvaluator может потребоваться точно оценить предоставленный modelResponseобъект.
- cancellationToken
- CancellationToken
Объект, CancellationToken который может отменить операцию оценки.
Возвращаемое значение
Содержащий EvaluationResult один или несколько EvaluationMetrics.