BLEUEvaluator Classe
Definição
Importante
Algumas informações se referem a produtos de pré-lançamento que podem ser substancialmente modificados antes do lançamento. A Microsoft não oferece garantias, expressas ou implícitas, das informações aqui fornecidas.
Um IEvaluator que avalia a qualidade de uma resposta produzida por um modelo de IA comparando-a a uma resposta de referência usando o algoritmo BLEU (Subestudo de Avaliação Bilíngue). Geralmente, ele é usado para avaliar a qualidade das tarefas de conversão automática ou geração de texto.
public ref class BLEUEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluatorpublic sealed class BLEUEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluatortype BLEUEvaluator = class
interface IEvaluatorPublic NotInheritable Class BLEUEvaluator
Implements IEvaluator- Herança
-
BLEUEvaluator
- Implementações
Comentários
A BLEUEvaluator computa a pontuação BLEU de uma resposta ("hipótese") em comparação com uma ou mais respostas de referência fornecidas por meio Referencesde . A pontuação é retornada em um NumericMetric valor entre 0,0 e 1,0, em que 0,0 não representa nenhuma correspondência e 1,0 indica uma correspondência perfeita. Por padrão, a pontuação é interpretada com um corte de passagem/falha de 0,5. Portanto, uma pontuação de 0,5 ou superior está passando e uma pontuação abaixo de 0,5 está falhando.
Construtores
| Nome | Description |
|---|---|
| BLEUEvaluator() |
Um IEvaluator que avalia a qualidade de uma resposta produzida por um modelo de IA comparando-a a uma resposta de referência usando o algoritmo BLEU (Subestudo de Avaliação Bilíngue). Geralmente, ele é usado para avaliar a qualidade das tarefas de conversão automática ou geração de texto. |
Propriedades
| Nome | Description |
|---|---|
| BLEUMetricName |
Obtém o Name do NumericMetric retornado por BLEUEvaluator. |
| EvaluationMetricNames |
Obtém os Names dos EvaluationMetrics produzidos por este IEvaluator. |
Métodos
| Nome | Description |
|---|---|
| EvaluateAsync(IEnumerable<ChatMessage>, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken) |
Avalia o fornecido |
