SentencePieceTokenizer.ByteFallback Propiedad
Definición
Importante
Parte de la información hace referencia a la versión preliminar del producto, que puede haberse modificado sustancialmente antes de lanzar la versión definitiva. Microsoft no otorga ninguna garantía, explícita o implícita, con respecto a la información proporcionada aquí.
Especifica si el modelo realizará una reserva de bytes cuando encuentre tokens desconocidos durante el proceso de codificación.
public bool ByteFallback { get; }member this.ByteFallback : boolPublic ReadOnly Property ByteFallback As Boolean