EquivalenceEvaluator Klasa
Definicja
Ważne
Niektóre informacje odnoszą się do produktu w wersji wstępnej, który może zostać znacząco zmodyfikowany przed wydaniem. Firma Microsoft nie udziela żadnych gwarancji, jawnych lub domniemanych, w odniesieniu do informacji podanych w tym miejscu.
Element IEvaluator , który ocenia "Równoważność" odpowiedzi wygenerowanej przez model AI z inną odpowiedzią dostarczoną za pośrednictwem metody GroundTruth.
public ref class EquivalenceEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluatorpublic sealed class EquivalenceEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluatortype EquivalenceEvaluator = class
interface IEvaluatorPublic NotInheritable Class EquivalenceEvaluator
Implements IEvaluator- Dziedziczenie
-
EquivalenceEvaluator
- Implementuje
Uwagi
EquivalenceEvaluator mierzy stopień, w jakim oceniana odpowiedź jest podobna do odpowiedzi dostarczonej za pośrednictwem metody GroundTruth. Zwraca wartość NumericMetric , która zawiera wynik dla "Równoważności". Wynik jest liczbą z zakresu od 1 do 5, z 1 wskazującą niską ocenę i 5 wskazującą doskonały wynik.
Uwaga:EquivalenceEvaluator to ewaluator oparty na sztucznej inteligencji, który używa modelu sztucznej inteligencji do przeprowadzenia oceny. Chociaż monit o wykonanie oceny przez tego ewaluatora jest przeznaczony do niezależnego od modelu, wydajność tego monitu (i wynikowej oceny) może się różnić w zależności od używanego modelu i może być szczególnie niska, gdy jest używany mniejszy/lokalny model.
Monit, który EquivalenceEvaluator używa, został przetestowany pod kątem (i dostrojony, aby dobrze pracować) z następującymi modelami. Dlatego użycie tego ewaluatora z modelem z poniższej listy prawdopodobnie przyniesie najlepsze wyniki. (Model, który ma być używany, można skonfigurować za pośrednictwem .ChatClient
GPT-4o
Konstruktory
| Nazwa | Opis |
|---|---|
| EquivalenceEvaluator() |
Element IEvaluator , który ocenia "Równoważność" odpowiedzi wygenerowanej przez model AI z inną odpowiedzią dostarczoną za pośrednictwem metody GroundTruth. |
Właściwości
| Nazwa | Opis |
|---|---|
| EquivalenceMetricName |
Name Pobiera wartość zwracaną NumericMetric przez EquivalenceEvaluator. |
| EvaluationMetricNames |
NamePobiera s z s wyprodukowanych EvaluationMetricprzez ten IEvaluatorelement . |
Metody
| Nazwa | Opis |
|---|---|
| EvaluateAsync(IEnumerable<ChatMessage>, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken) |
Oblicza podaną wartość |
