FluencyEvaluator 类
定义
重要
一些信息与预发行产品相关,相应产品在发行之前可能会进行重大修改。 对于此处提供的信息,Microsoft 不作任何明示或暗示的担保。
用于 IEvaluator 评估 AI 模型生成的响应的“流畅性”。
public ref class FluencyEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluator
public sealed class FluencyEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluator
type FluencyEvaluator = class
interface IEvaluator
Public NotInheritable Class FluencyEvaluator
Implements IEvaluator
- 继承
-
FluencyEvaluator
- 实现
注解
FluencyEvaluator 测量要评估的响应在语言上正确的程度(即,符合语法规则、语法结构和适当的词汇用法)。 它返回一个 NumericMetric 包含“Fluency”分数的分数。 分数是介于 1 和 5 之间的数字,1 表示分数不佳,5 表示得分出色。
注意:FluencyEvaluator 是一个基于 AI 的计算器,它使用 AI 模型来执行其评估。 虽然此评估程序用于执行其评估的提示设计为与模型无关,但此提示(和生成的评估)的性能可能会因所使用的模型而异,在使用较小的/本地模型时可能会特别差。
已针对以下模型测试了使用(并经过优化以很好地处理)使用的提示 FluencyEvaluator 。 因此,将此计算器与以下列表中的模型结合使用可能会产生最佳结果。 (可通过 .. 配置 ChatClient要使用的模型)
GPT-4o
构造函数
| 名称 | 说明 |
|---|---|
| FluencyEvaluator() |
用于 IEvaluator 评估 AI 模型生成的响应的“流畅性”。 |
属性
| 名称 | 说明 |
|---|---|
| EvaluationMetricNames |
Name获取由此EvaluationMetric生成的 s 。IEvaluator |
| FluencyMetricName |
方法
| 名称 | 说明 |
|---|---|
| EvaluateAsync(IEnumerable<ChatMessage>, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken) |
评估提供的 |