GLEUEvaluator 類別
定義
重要
部分資訊涉及發行前產品,在發行之前可能會有大幅修改。 Microsoft 對此處提供的資訊,不做任何明確或隱含的瑕疵擔保。
IEvaluator該系統透過使用 GLEU(Google-BLEU)演算法,將 AI 模型產生的回應與參考回應進行比較,來評估其品質。 GLEU 評估器利用 n-gram 重疊來衡量產生的回應與一個或多個參考回應之間的相似度。
public ref class GLEUEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluator
public sealed class GLEUEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluator
type GLEUEvaluator = class
interface IEvaluator
Public NotInheritable Class GLEUEvaluator
Implements IEvaluator
- 繼承
-
GLEUEvaluator
- 實作
備註
計算 GLEUEvaluator 一個反應(「假設」)的 GLEU 分數,與透過 References提供一個或多個參考回應的比較。 分數在 中 NumericMetric 回傳,值介於 0.0 到 1.0 之間,0.0 代表完全不匹配,1.0 表示完全匹配。 預設情況下,分數以0.5的通過/不通過門檻計算。 所以分數 0.5 或以上就算及格,低於 0.5 分就算不及格。
建構函式
| 名稱 | Description |
|---|---|
| GLEUEvaluator() |
IEvaluator該系統透過使用 GLEU(Google-BLEU)演算法,將 AI 模型產生的回應與參考回應進行比較,來評估其品質。 GLEU 評估器利用 n-gram 重疊來衡量產生的回應與一個或多個參考回應之間的相似度。 |
屬性
| 名稱 | Description |
|---|---|
| EvaluationMetricNames |
由Name此EvaluationMetric產生 s 的 s IEvaluator。 |
| GLEUMetricName |
得到 Name 的 NumericMetric 由 返回 GLEUEvaluator。 |
方法
| 名稱 | Description |
|---|---|
| EvaluateAsync(IEnumerable<ChatMessage>, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken) |
評估所提供的 |