RelevanceTruthAndCompletenessEvaluator Clase
Definición
Importante
Parte de la información hace referencia a la versión preliminar del producto, que puede haberse modificado sustancialmente antes de lanzar la versión definitiva. Microsoft no otorga ninguna garantía, explícita o implícita, con respecto a la información proporcionada aquí.
que IEvaluator evalúa la "Relevancia", "Verdad" y "Integridad" de una respuesta generada por un modelo de IA.
public ref class RelevanceTruthAndCompletenessEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluator[System.Diagnostics.CodeAnalysis.Experimental("AIEVAL001")]
public sealed class RelevanceTruthAndCompletenessEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluatorpublic sealed class RelevanceTruthAndCompletenessEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluator[<System.Diagnostics.CodeAnalysis.Experimental("AIEVAL001")>]
type RelevanceTruthAndCompletenessEvaluator = class
interface IEvaluatortype RelevanceTruthAndCompletenessEvaluator = class
interface IEvaluatorPublic NotInheritable Class RelevanceTruthAndCompletenessEvaluator
Implements IEvaluator- Herencia
-
RelevanceTruthAndCompletenessEvaluator
- Atributos
- Implementaciones
Comentarios
RelevanceTruthAndCompletenessEvaluator devuelve tres NumericMetrics que contienen puntuaciones para 'Relevancia (RTC)', 'Verdad (RTC)' y 'Integridad (RTC)' respectivamente. Cada puntuación es un número comprendido entre 1 y 5, con 1 que indica una puntuación deficiente y 5 que indica una puntuación excelente.
Nota:RelevanceTruthAndCompletenessEvaluator es un evaluador basado en inteligencia artificial que usa un modelo de IA para realizar su evaluación. Aunque el aviso que usa este evaluador para realizar su evaluación está diseñado para ser independiente del modelo, el rendimiento de este aviso (y la evaluación resultante) puede variar en función del modelo utilizado y puede ser especialmente deficiente cuando se usa un modelo más pequeño o local.
La solicitud que RelevanceTruthAndCompletenessEvaluator usa se ha probado con (y se ha ajustado para funcionar bien) con los siguientes modelos. Por lo tanto, es probable que el uso de este evaluador con un modelo de la lista siguiente genere los mejores resultados. (El modelo que se va a usar se puede configurar a través ChatClientde ).
GPT-4o
Constructores
| Nombre | Description |
|---|---|
| RelevanceTruthAndCompletenessEvaluator() |
que IEvaluator evalúa la "Relevancia", "Verdad" y "Integridad" de una respuesta generada por un modelo de IA. |
Propiedades
| Nombre | Description |
|---|---|
| CompletenessMetricName |
Obtiene el Name de devuelto NumericMetric por RelevanceTruthAndCompletenessEvaluator para "Integridad". |
| EvaluationMetricNames |
Obtiene los Names de los EvaluationMetricgenerados por este IEvaluatorobjeto . |
| RelevanceMetricName |
Obtiene el NameNumericMetric de devuelto por RelevanceTruthAndCompletenessEvaluator para 'Relevancia'. |
| TruthMetricName |
Obtiene el Name de devuelto NumericMetric por RelevanceTruthAndCompletenessEvaluator para "Verdad". |
Métodos
| Nombre | Description |
|---|---|
| EvaluateAsync(IEnumerable<ChatMessage>, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken) |
Evalúa el proporcionado |
