BpeTokenizer.EndOfWordSuffix Eigenschaft

Definition

Namespace:: Microsoft.ML.Tokenizers

Assembly:: Microsoft.ML.Tokenizers.dll

Paket:: Microsoft.ML.Tokenizers v1.0.1

Paket:: Microsoft.ML.Tokenizers v0.22.0

Paket:: Microsoft.ML.Tokenizers v2.0.0-preview.1.25125.4

Quelle:: BPETokenizer.cs

Quelle:: BPETokenizer.cs

Quelle:: BPETokenizer.cs

Wichtig

Einige Informationen beziehen sich auf Vorabversionen, die vor dem Release ggf. grundlegend überarbeitet werden. Microsoft übernimmt hinsichtlich der hier bereitgestellten Informationen keine Gewährleistungen, seien sie ausdrücklich oder konkludent.

Ein optionales Suffix zum Charakterisieren und End-of-Word-Unterwort

public string? EndOfWordSuffix { get; }

member this.EndOfWordSuffix : string

Public ReadOnly Property EndOfWordSuffix As String

Eigenschaftswert

String

Gilt für: