RelevanceTruthAndCompletenessEvaluator Klasse
Definition
Wichtig
Einige Informationen beziehen sich auf Vorabversionen, die vor dem Release ggf. grundlegend überarbeitet werden. Microsoft übernimmt hinsichtlich der hier bereitgestellten Informationen keine Gewährleistungen, seien sie ausdrücklich oder konkludent.
Eine IEvaluator , die die "Relevanz", "Wahrheit" und "Vollständigkeit" einer Antwort auswertet, die von einem KI-Modell erzeugt wird.
public ref class RelevanceTruthAndCompletenessEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluator[System.Diagnostics.CodeAnalysis.Experimental("AIEVAL001")]
public sealed class RelevanceTruthAndCompletenessEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluatorpublic sealed class RelevanceTruthAndCompletenessEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluator[<System.Diagnostics.CodeAnalysis.Experimental("AIEVAL001")>]
type RelevanceTruthAndCompletenessEvaluator = class
interface IEvaluatortype RelevanceTruthAndCompletenessEvaluator = class
interface IEvaluatorPublic NotInheritable Class RelevanceTruthAndCompletenessEvaluator
Implements IEvaluator- Vererbung
-
RelevanceTruthAndCompletenessEvaluator
- Attribute
- Implementiert
Hinweise
RelevanceTruthAndCompletenessEvaluator gibt drei NumericMetricWerte zurück, die Bewertungen für "Relevanz (RTC)", "Wahrheit (RTC)" bzw. "Vollständigkeit (RTC)" enthalten. Jeder Punktwert ist eine Zahl zwischen 1 und 5, wobei 1 eine schlechte Bewertung angibt, und 5, die eine hervorragende Bewertung anzeigt.
Hinweis:RelevanceTruthAndCompletenessEvaluator ist ein KI-basierter Evaluator, der ein KI-Modell verwendet, um seine Auswertung durchzuführen. Während die Aufforderung, dass dieser Evaluierungsauswerter verwendet, modellagnostisch ist, kann die Leistung dieser Eingabeaufforderung (und der resultierenden Auswertung) je nach verwendetem Modell variieren und kann besonders schlecht sein, wenn ein kleineres/lokales Modell verwendet wird.
Die Eingabeaufforderung, die verwendet wird, RelevanceTruthAndCompletenessEvaluator wurde auf die folgenden Modelle getestet (und darauf abgestimmt), dass sie gut funktionieren. Daher ist die Verwendung dieses Evaluators mit einem Modell aus der folgenden Liste wahrscheinlich die besten Ergebnisse. (Das zu verwendende Modell kann über ChatClient.)
GPT-4o
Konstruktoren
| Name | Beschreibung |
|---|---|
| RelevanceTruthAndCompletenessEvaluator() |
Eine IEvaluator , die die "Relevanz", "Wahrheit" und "Vollständigkeit" einer Antwort auswertet, die von einem KI-Modell erzeugt wird. |
Eigenschaften
| Name | Beschreibung |
|---|---|
| CompletenessMetricName |
Ruft den Name von NumericMetric "Completeness" zurückgegebenen RelevanceTruthAndCompletenessEvaluator ab. |
| EvaluationMetricNames |
Ruft die Names der EvaluationMetricvon diesem IEvaluatorerzeugten s ab. |
| RelevanceMetricName |
Ruft den NameNumericMetric von 'Relevanz' zurückgegebenen RelevanceTruthAndCompletenessEvaluator Wert ab. |
| TruthMetricName |
Ruft den NameNumericMetric von "Wahrheit" zurückgegebenen RelevanceTruthAndCompletenessEvaluator ab. |
Methoden
| Name | Beschreibung |
|---|---|
| EvaluateAsync(IEnumerable<ChatMessage>, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken) |
Wertet den angegebenen |
