F1Evaluator Classe
Definição
Importante
Algumas informações dizem respeito a um produto pré-lançado que pode ser substancialmente modificado antes de ser lançado. A Microsoft não faz garantias, de forma expressa ou implícita, em relação à informação aqui apresentada.
An IEvaluator que avalia a qualidade de uma resposta produzida por um modelo de IA comparando-a com uma resposta de referência usando o algoritmo de pontuação F1. A pontuação F1 é a razão entre o número de palavras partilhadas entre a resposta gerada e a resposta de referência.
public ref class F1Evaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluatorpublic sealed class F1Evaluator : Microsoft.Extensions.AI.Evaluation.IEvaluatortype F1Evaluator = class
interface IEvaluatorPublic NotInheritable Class F1Evaluator
Implements IEvaluator- Herança
-
F1Evaluator
- Implementações
Observações
O F1Evaluator calcula a pontuação F1 de uma resposta ("hipótese") em relação a uma referência de verdade fundamental fornecida por GroundTruth. A pontuação é devolvida em a NumericMetric com um valor entre 0,0 e 1,0, onde 0,0 representa nenhuma correspondência e 1,0 indica correspondência perfeita. Por defeito, a pontuação é interpretada com um corte de aprovação/reprovação de 0,5. Assim, uma pontuação de 0,5 ou superior é aprovação e uma pontuação inferior a 0,5 é reprovação.
Construtores
| Name | Description |
|---|---|
| F1Evaluator() |
An IEvaluator que avalia a qualidade de uma resposta produzida por um modelo de IA comparando-a com uma resposta de referência usando o algoritmo de pontuação F1. A pontuação F1 é a razão entre o número de palavras partilhadas entre a resposta gerada e a resposta de referência. |
Propriedades
| Name | Description |
|---|---|
| EvaluationMetricNames |
Obtém o Names do EvaluationMetrics produzido por isto IEvaluator. |
| F1MetricName |
Obtém o Name de devolvido NumericMetric por F1Evaluator. |
Métodos
| Name | Description |
|---|---|
| EvaluateAsync(IEnumerable<ChatMessage>, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken) |
Avalia o fornecido |
