ToolCallAccuracyEvaluatorContext Classe

Definição

Espaço de Nomes:
Microsoft.Extensions.AI.Evaluation.Quality
Assemblagem:
Microsoft.Extensions.AI.Evaluation.Quality.dll
Pacote:
Microsoft.Extensions.AI.Evaluation.Quality v10.6.0
Origem:
ToolCallAccuracyEvaluatorContext.cs

Informação contextual que é ToolCallAccuracyEvaluator utilizada para avaliar a eficácia de um sistema de IA no uso das ferramentas que lhe são fornecidas.

public ref class ToolCallAccuracyEvaluatorContext sealed : Microsoft::Extensions::AI::Evaluation::EvaluationContext
[System.Diagnostics.CodeAnalysis.Experimental("AIEVAL001")]
public sealed class ToolCallAccuracyEvaluatorContext : Microsoft.Extensions.AI.Evaluation.EvaluationContext
public sealed class ToolCallAccuracyEvaluatorContext : Microsoft.Extensions.AI.Evaluation.EvaluationContext
[<System.Diagnostics.CodeAnalysis.Experimental("AIEVAL001")>]
type ToolCallAccuracyEvaluatorContext = class
    inherit EvaluationContext
type ToolCallAccuracyEvaluatorContext = class
    inherit EvaluationContext
Public NotInheritable Class ToolCallAccuracyEvaluatorContext
Inherits EvaluationContext
Herança
Object
EvaluationContext
ToolCallAccuracyEvaluatorContext
Atributos
ExperimentalAttribute

Observações

ToolCallAccuracyEvaluator mede a precisão com que um sistema de IA utiliza ferramentas examinando as chamadas de ferramenta (ou seja, FunctionCallContents) presentes na resposta fornecida para avaliar a relevância dessas chamadas para a conversa, a correção dos parâmetros para essas chamadas em relação às definições de ferramentas fornecidas via ToolDefinitions, e a precisão da extração do valor do parâmetro a partir do histórico de conversa fornecido.

Note que, neste momento, ToolCallAccuracyEvaluator só suporta a avaliação de chamadas para ferramentas definidas como AIFunctionDeclarations. Quaisquer outras AITool definições fornecidas por ToolDefinitions serão ignoradas.

Construtores

Name Description
ToolCallAccuracyEvaluatorContext(AITool[])

Inicializa uma nova instância da ToolCallAccuracyEvaluatorContext classe.
ToolCallAccuracyEvaluatorContext(IEnumerable<AITool>)

Inicializa uma nova instância da ToolCallAccuracyEvaluatorContext classe.

Propriedades

Name Description
Contents

Obtém ou define uma lista de AIContent objetos que incluem toda a informação presente neste EvaluationContext.

(Herdado de EvaluationContext)
Name

Recebe ou define o nome para este EvaluationContext.

(Herdado de EvaluationContext)
ToolDefinitions

Obtém um conjunto de definições de ferramentas (ver Tools) que foram usadas ao gerar a resposta do modelo que está a ser avaliada.
ToolDefinitionsContextName

Obtém o único Name que é usado para ToolCallAccuracyEvaluatorContext.

Aplica-se a