Język

TokenizerResult(String, String, IReadOnlyList<Split>, Boolean) Konstruktor

Definicja

Utwórz nowy obiekt obiektu TokenizerResult.

public TokenizerResult(string originalString, string normalizedString, System.Collections.Generic.IReadOnlyList<Microsoft.ML.Tokenizers.Split> splits, bool offsetsMappedToOriginalString);
new Microsoft.ML.Tokenizers.TokenizerResult : string * string * System.Collections.Generic.IReadOnlyList<Microsoft.ML.Tokenizers.Split> * bool -> Microsoft.ML.Tokenizers.TokenizerResult
Public Sub New (originalString As String, normalizedString As String, splits As IReadOnlyList(Of Split), offsetsMappedToOriginalString As Boolean)

Parametry

originalString
String

Lista tokenów do scalenia.

normalizedString
String

Lista tokenów do scalenia.

splits
IReadOnlyList<Split>

Lista tokenów do scalenia.

offsetsMappedToOriginalString
Boolean

Wskazuje, czy przesunięcia są mapowane na oryginalny ciąg, czy znormalizowany ciąg.

Dotyczy