SentencePieceTokenizer.ByteFallback Propriedade
Definição
Importante
Algumas informações se referem a produtos de pré-lançamento que podem ser substancialmente modificados antes do lançamento. A Microsoft não oferece garantias, expressas ou implícitas, das informações aqui fornecidas.
Especifica se o modelo fará um fallback de bytes quando encontrar tokens desconhecidos durante o processo de codificação.
public bool ByteFallback { get; }member this.ByteFallback : boolPublic ReadOnly Property ByteFallback As Boolean