Langue

CodeGenTokenizer.PreTokenizer Propriété

Définition

Obtient le PreTokenizer utilisé par le tokenizer.

public override Microsoft.ML.Tokenizers.PreTokenizer? PreTokenizer { get; }
member this.PreTokenizer : Microsoft.ML.Tokenizers.PreTokenizer
Public Overrides ReadOnly Property PreTokenizer As PreTokenizer

Valeur de propriété

S’applique à