RelevanceEvaluator クラス

定義

public ref class RelevanceEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluator

public sealed class RelevanceEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluator

type RelevanceEvaluator = class
    interface IEvaluator

Public NotInheritable Class RelevanceEvaluator
Implements IEvaluator

継承

Object

RelevanceEvaluator

実装

IEvaluator

注釈

RelevanceEvaluator は、入力を理解し、コンテキストに応じて適切な応答を生成する際の AI システムのパフォーマンスを測定します。 '関連性' のスコアを含む NumericMetric を返します。 スコアは 1 から 5 までの数値で、1 はスコアが低く、5 は優れたスコアを示します。

高い関連性スコアは、入力に対する AI システムの理解と、一貫性のあるコンテキストに応じた適切な出力を生成する機能を示します。 逆に、関連性スコアが低い場合は、生成された応答がトピック外であるか、コンテキストに欠けているか、ユーザーの意図したクエリに対処するのに不十分である可能性があることを示します。

注:RelevanceEvaluator は、AI モデルを使用してその評価を実行する AI ベースのエバリュエーターです。 このエバリュエーターが評価を実行するために使用するプロンプトはモデルに依存しないように設計されていますが、このプロンプト (および結果の評価) のパフォーマンスは、使用されるモデルによって異なる場合があり、小さいモデルやローカル モデルを使用する場合は特に低下する可能性があります。

RelevanceEvaluator使用するプロンプトは、次のモデルに対してテスト (および適切に動作するように調整) されています。 そのため、次の一覧のモデルでこのエバリュエーターを使用すると、最適な結果が得られる可能性があります。 (使用するモデルは、 ChatClientを使用して構成できます)。

GPT-4o