FluencyEvaluator クラス

定義

AI モデルによって生成された応答の "流暢性" を評価する IEvaluator

public ref class FluencyEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluator
public sealed class FluencyEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluator
type FluencyEvaluator = class
    interface IEvaluator
Public NotInheritable Class FluencyEvaluator
Implements IEvaluator
継承
FluencyEvaluator
実装

注釈

FluencyEvaluator は、評価される応答が言語的に正しい程度を測定します (つまり、文法規則、構文構造、適切なボキャブラリの使用に準拠します)。 'Fluency' のスコアを含む NumericMetric を返します。 スコアは 1 から 5 までの数値で、1 はスコアが低く、5 は優れたスコアを示します。

注:FluencyEvaluator は、AI モデルを使用してその評価を実行する AI ベースのエバリュエーターです。 このエバリュエーターが評価を実行するために使用するプロンプトはモデルに依存しないように設計されていますが、このプロンプト (および結果の評価) のパフォーマンスは、使用されるモデルによって異なる場合があり、小さいモデルやローカル モデルを使用する場合は特に低下する可能性があります。

FluencyEvaluator使用するプロンプトは、次のモデルに対してテスト (および適切に動作するように調整) されています。 そのため、次の一覧のモデルでこのエバリュエーターを使用すると、最適な結果が得られる可能性があります。 (使用するモデルは、 ChatClientを使用して構成できます)。

GPT-4o

コンストラクター

名前 説明
FluencyEvaluator()

AI モデルによって生成された応答の "流暢性" を評価する IEvaluator

プロパティ

名前 説明
EvaluationMetricNames

このIEvaluatorによって生成されたEvaluationMetricNameを取得します。

FluencyMetricName

FluencyEvaluatorによって返されるNumericMetricNameを取得します。

メソッド

名前 説明
EvaluateAsync(IEnumerable<ChatMessage>, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)

指定したmodelResponseを評価し、1 つ以上のEvaluationMetricを含むEvaluationResultを返します。

拡張メソッド

名前 説明
EvaluateAsync(IEvaluator, ChatMessage, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)

指定したmodelResponseを評価し、1 つ以上のEvaluationMetricを含むEvaluationResultを返します。

EvaluateAsync(IEvaluator, ChatMessage, ChatMessage, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)

指定したmodelResponseを評価し、1 つ以上のEvaluationMetricを含むEvaluationResultを返します。

EvaluateAsync(IEvaluator, ChatMessage, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)

指定したmodelResponseを評価し、1 つ以上のEvaluationMetricを含むEvaluationResultを返します。

EvaluateAsync(IEvaluator, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)

指定したmodelResponseを評価し、1 つ以上のEvaluationMetricを含むEvaluationResultを返します。

EvaluateAsync(IEvaluator, String, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)

指定したmodelResponseを評価し、1 つ以上のEvaluationMetricを含むEvaluationResultを返します。

EvaluateAsync(IEvaluator, String, String, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)

指定したmodelResponseを評価し、1 つ以上のEvaluationMetricを含むEvaluationResultを返します。

適用対象