RelevanceTruthAndCompletenessEvaluator Classe
Definição
Importante
Algumas informações dizem respeito a um produto pré-lançado que pode ser substancialmente modificado antes de ser lançado. A Microsoft não faz garantias, de forma expressa ou implícita, em relação à informação aqui apresentada.
Um IEvaluator que avalia a 'Relevância', 'Verdade' e 'Completude' de uma resposta produzida por um modelo de IA.
public ref class RelevanceTruthAndCompletenessEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluator[System.Diagnostics.CodeAnalysis.Experimental("AIEVAL001")]
public sealed class RelevanceTruthAndCompletenessEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluatorpublic sealed class RelevanceTruthAndCompletenessEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluator[<System.Diagnostics.CodeAnalysis.Experimental("AIEVAL001")>]
type RelevanceTruthAndCompletenessEvaluator = class
interface IEvaluatortype RelevanceTruthAndCompletenessEvaluator = class
interface IEvaluatorPublic NotInheritable Class RelevanceTruthAndCompletenessEvaluator
Implements IEvaluator- Herança
-
RelevanceTruthAndCompletenessEvaluator
- Atributos
- Implementações
Observações
RelevanceTruthAndCompletenessEvaluator devolve três NumericMetrics que contêm pontuações para 'Relevância (RTC)', 'Verdade (RTC)' e 'Completude (RTC)', respetivamente. Cada pontuação é um número entre 1 e 5, sendo 1 uma pontuação fraca e 5 uma pontuação excelente.
Nota:RelevanceTruthAndCompletenessEvaluator é um avaliador baseado em IA que utiliza um modelo de IA para realizar a sua avaliação. Embora o prompt que este avaliador utiliza para realizar a sua avaliação seja concebido para ser independente do modelo, o desempenho deste prompt (e da avaliação resultante) pode variar consoante o modelo utilizado, e pode ser especialmente fraco quando se utiliza um modelo mais pequeno ou local.
O prompt que RelevanceTruthAndCompletenessEvaluator utiliza foi testado contra (e ajustado para funcionar bem) com os seguintes modelos. Portanto, usar este avaliador com um modelo da lista seguinte é provável que produza os melhores resultados. (O modelo a ser utilizado pode ser configurado via ChatClient.)
GPT-4o
Construtores
| Name | Descrição |
|---|---|
| RelevanceTruthAndCompletenessEvaluator() |
Um IEvaluator que avalia a 'Relevância', 'Verdade' e 'Completude' de uma resposta produzida por um modelo de IA. |
Propriedades
| Name | Descrição |
|---|---|
| CompletenessMetricName |
Recebe o Name de NumericMetric devolvido por RelevanceTruthAndCompletenessEvaluator 'Completude'. |
| EvaluationMetricNames |
Obtém o Names do EvaluationMetrics produzido por isto IEvaluator. |
| RelevanceMetricName |
Recebe o Name de devolvido NumericMetric por RelevanceTruthAndCompletenessEvaluator 'Relevância'. |
| TruthMetricName |
Recebe o Name de devolvido NumericMetric por RelevanceTruthAndCompletenessEvaluator 'Verdade'. |
Métodos
| Name | Descrição |
|---|---|
| EvaluateAsync(IEnumerable<ChatMessage>, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken) |
Avalia o fornecido |
