CodeGenTokenizer.PreTokenizer 屬性

定義

命名空間:: Microsoft.ML.Tokenizers

組件:: Microsoft.ML.Tokenizers.dll

套件:: Microsoft.ML.Tokenizers v1.0.1

套件:: Microsoft.ML.Tokenizers v0.22.0

套件:: Microsoft.ML.Tokenizers v2.0.0-preview.1.25125.4

來源:: CodeGenTokenizer.cs

來源:: CodeGenTokenizer.cs

來源:: CodeGenTokenizer.cs

重要

部分資訊涉及發行前產品，在發行之前可能會有大幅修改。 Microsoft 對此處提供的資訊，不做任何明確或隱含的瑕疵擔保。

取得分幣器使用的預分組器。

public override Microsoft.ML.Tokenizers.PreTokenizer? PreTokenizer { get; }

member this.PreTokenizer : Microsoft.ML.Tokenizers.PreTokenizer

Public Overrides ReadOnly Property PreTokenizer As PreTokenizer

屬性值

適用於