CompletenessEvaluator Klasa
Definicja
Ważne
Niektóre informacje odnoszą się do produktu w wersji wstępnej, który może zostać znacząco zmodyfikowany przed wydaniem. Firma Microsoft nie udziela żadnych gwarancji, jawnych lub domniemanych, w odniesieniu do informacji podanych w tym miejscu.
Element IEvaluator , który ocenia "Kompletność" odpowiedzi wygenerowanej przez model sztucznej inteligencji.
public ref class CompletenessEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluatorpublic sealed class CompletenessEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluatortype CompletenessEvaluator = class
interface IEvaluatorPublic NotInheritable Class CompletenessEvaluator
Implements IEvaluator- Dziedziczenie
-
CompletenessEvaluator
- Implementuje
Uwagi
CompletenessEvaluator mierzy zdolność systemu sztucznej inteligencji do dostarczania kompleksowych i dokładnych odpowiedzi. Ocenia, jak dokładnie odpowiedź jest zgodna z kluczowymi informacjami, oświadczeniami i instrukcjami ustalonymi w podanym elememencie GroundTruth. Zwraca wartość zawierającą NumericMetric wynik dla wartości "Kompletność". Wynik jest liczbą z zakresu od 1 do 5, z 1 wskazującą niską ocenę i 5 wskazującą doskonały wynik.
Uwaga:CompletenessEvaluator to ewaluator oparty na sztucznej inteligencji, który używa modelu sztucznej inteligencji do przeprowadzenia oceny. Chociaż monit o wykonanie oceny przez tego ewaluatora jest przeznaczony do niezależnego od modelu, wydajność tego monitu (i wynikowej oceny) może się różnić w zależności od używanego modelu i może być szczególnie niska, gdy jest używany mniejszy/lokalny model.
Monit, który CompletenessEvaluator używa, został przetestowany pod kątem (i dostrojony, aby dobrze pracować) z następującymi modelami. Dlatego użycie tego ewaluatora z modelem z poniższej listy prawdopodobnie przyniesie najlepsze wyniki. (Model, który ma być używany, można skonfigurować za pośrednictwem .ChatClient
GPT-4o
Konstruktory
| Nazwa | Opis |
|---|---|
| CompletenessEvaluator() |
Element IEvaluator , który ocenia "Kompletność" odpowiedzi wygenerowanej przez model sztucznej inteligencji. |
Właściwości
| Nazwa | Opis |
|---|---|
| CompletenessMetricName |
Name Pobiera wartość zwracaną NumericMetric przez CompletenessEvaluator. |
| EvaluationMetricNames |
NamePobiera s z s wyprodukowanych EvaluationMetricprzez ten IEvaluatorelement . |
Metody
| Nazwa | Opis |
|---|---|
| EvaluateAsync(IEnumerable<ChatMessage>, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken) |
Oblicza podaną wartość |
