CompletenessEvaluator Clase
Definición
Importante
Parte de la información hace referencia a la versión preliminar del producto, que puede haberse modificado sustancialmente antes de lanzar la versión definitiva. Microsoft no otorga ninguna garantía, explícita o implícita, con respecto a la información proporcionada aquí.
que IEvaluator evalúa la "integridad" de una respuesta producida por un modelo de IA.
public ref class CompletenessEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluatorpublic sealed class CompletenessEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluatortype CompletenessEvaluator = class
interface IEvaluatorPublic NotInheritable Class CompletenessEvaluator
Implements IEvaluator- Herencia
-
CompletenessEvaluator
- Implementaciones
Comentarios
CompletenessEvaluator mide la capacidad de un sistema de inteligencia artificial para ofrecer respuestas completas y precisas. Evalúa cómo la respuesta se alinea exhaustivamente con la información clave, las notificaciones y las instrucciones establecidas en el proporcionado GroundTruth. Devuelve un NumericMetric valor de tipo que contiene una puntuación para "Integridad". La puntuación es un número comprendido entre 1 y 5, con 1 que indica una puntuación deficiente y 5 que indica una puntuación excelente.
Nota:CompletenessEvaluator es un evaluador basado en inteligencia artificial que usa un modelo de IA para realizar su evaluación. Aunque el aviso que usa este evaluador para realizar su evaluación está diseñado para ser independiente del modelo, el rendimiento de este aviso (y la evaluación resultante) puede variar en función del modelo utilizado y puede ser especialmente deficiente cuando se usa un modelo más pequeño o local.
La solicitud que CompletenessEvaluator usa se ha probado con (y se ha ajustado para funcionar bien) con los siguientes modelos. Por lo tanto, es probable que el uso de este evaluador con un modelo de la lista siguiente genere los mejores resultados. (El modelo que se va a usar se puede configurar a través ChatClientde ).
GPT-4o
Constructores
| Nombre | Description |
|---|---|
| CompletenessEvaluator() |
que IEvaluator evalúa la "integridad" de una respuesta producida por un modelo de IA. |
Propiedades
| Nombre | Description |
|---|---|
| CompletenessMetricName |
Obtiene el Name objeto del NumericMetric devuelto por CompletenessEvaluator. |
| EvaluationMetricNames |
Obtiene los Names de los EvaluationMetricgenerados por este IEvaluatorobjeto . |
Métodos
| Nombre | Description |
|---|---|
| EvaluateAsync(IEnumerable<ChatMessage>, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken) |
Evalúa el proporcionado |
