語言

GLEUEvaluator 類別

定義

IEvaluator該系統透過使用 GLEU(Google-BLEU)演算法,將 AI 模型產生的回應與參考回應進行比較,來評估其品質。 GLEU 評估器利用 n-gram 重疊來衡量產生的回應與一個或多個參考回應之間的相似度。

public ref class GLEUEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluator
public sealed class GLEUEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluator
type GLEUEvaluator = class
    interface IEvaluator
Public NotInheritable Class GLEUEvaluator
Implements IEvaluator
繼承
GLEUEvaluator
實作

備註

計算 GLEUEvaluator 一個反應(「假設」)的 GLEU 分數,與透過 References提供一個或多個參考回應的比較。 分數在 中 NumericMetric 回傳,值介於 0.0 到 1.0 之間,0.0 代表完全不匹配,1.0 表示完全匹配。 預設情況下,分數以0.5的通過/不通過門檻計算。 所以分數 0.5 或以上就算及格,低於 0.5 分就算不及格。

建構函式

名稱 Description
GLEUEvaluator()

IEvaluator該系統透過使用 GLEU(Google-BLEU)演算法,將 AI 模型產生的回應與參考回應進行比較,來評估其品質。 GLEU 評估器利用 n-gram 重疊來衡量產生的回應與一個或多個參考回應之間的相似度。

屬性

名稱 Description
EvaluationMetricNames

由Name此EvaluationMetric產生 s 的 s IEvaluator。

GLEUMetricName

得到 Name 的 NumericMetric 由 返回 GLEUEvaluator。

方法

名稱 Description
EvaluateAsync(IEnumerable<ChatMessage>, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)

評估所提供的 modelResponse ,並回傳包含 EvaluationResult 一個或多個 EvaluationMetrics。

擴充方法

名稱 Description
EvaluateAsync(IEvaluator, ChatMessage, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)

評估所提供的 modelResponse ,並回傳包含 EvaluationResult 一個或多個 EvaluationMetrics。

EvaluateAsync(IEvaluator, ChatMessage, ChatMessage, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)

評估所提供的 modelResponse ,並回傳包含 EvaluationResult 一個或多個 EvaluationMetrics。

EvaluateAsync(IEvaluator, ChatMessage, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)

評估所提供的 modelResponse ,並回傳包含 EvaluationResult 一個或多個 EvaluationMetrics。

EvaluateAsync(IEvaluator, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)

評估所提供的 modelResponse ,並回傳包含 EvaluationResult 一個或多個 EvaluationMetrics。

EvaluateAsync(IEvaluator, String, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)

評估所提供的 modelResponse ,並回傳包含 EvaluationResult 一個或多個 EvaluationMetrics。

EvaluateAsync(IEvaluator, String, String, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken)

評估所提供的 modelResponse ,並回傳包含 EvaluationResult 一個或多個 EvaluationMetrics。

適用於