TokenizerDecoder Classe

Definição

Namespace:: Microsoft.ML.Tokenizers

Assembly:: Microsoft.ML.Tokenizers.dll

Pacote:: Microsoft.ML.Tokenizers v0.20.1

Importante

Algumas informações se referem a produtos de pré-lançamento que podem ser substancialmente modificados antes do lançamento. A Microsoft não oferece garantias, expressas ou implícitas, das informações aqui fornecidas.

Um Decodificador tem a responsabilidade de mesclar a lista de tokens fornecida em uma cadeia de caracteres.

public abstract class TokenizerDecoder

type TokenizerDecoder = class

Public MustInherit Class TokenizerDecoder

Herança: Object
TokenizerDecoder

Derivado: Microsoft.ML.Tokenizers.BpeDecoder

Construtores

Nome	Description
TokenizerDecoder()	Um Decodificador tem a responsabilidade de mesclar a lista de tokens fornecida em uma cadeia de caracteres.

Métodos

Nome	Description
Decode(IEnumerable<String>)	Decodificar unindo todos os tokens a uma cadeia de caracteres.

Aplica-se a