WordPieceTokenizer.Decode Methode

Definition

Namespace:: Microsoft.ML.Tokenizers

Assembly:: Microsoft.ML.Tokenizers.dll

Paket:: Microsoft.ML.Tokenizers v1.0.1

Paket:: Microsoft.ML.Tokenizers v0.22.0

Paket:: Microsoft.ML.Tokenizers v2.0.0-preview.1.25125.4

Wichtig

Einige Informationen beziehen sich auf Vorabversionen, die vor dem Release ggf. grundlegend überarbeitet werden. Microsoft übernimmt hinsichtlich der hier bereitgestellten Informationen keine Gewährleistungen, seien sie ausdrücklich oder konkludent.

Überlädt

Name	Beschreibung
Decode(IEnumerable<Int32>, Span<Char>, Int32, Int32)	Decodieren Sie die angegebenen IDs wieder in Text, und speichern Sie das Ergebnis in der `destination` Spanne.
Decode(IEnumerable<Int32>, Span<Char>, Boolean, Int32, Int32)	Decodieren Sie die angegebenen IDs wieder in Text, und speichern Sie das Ergebnis in der `destination` Spanne.
Decode(IEnumerable<Int32>)	Decodieren Sie die angegebenen IDs zurück zu einer Zeichenfolge.
Decode(IEnumerable<Int32>, Boolean)	Decodieren Sie die angegebenen IDs zurück zu einer Zeichenfolge.

Decode(IEnumerable<Int32>, Span<Char>, Int32, Int32)

Quelle:: WordPieceTokenizer.cs

Quelle:: WordPieceTokenizer.cs

Quelle:: WordPieceTokenizer.cs

Decodieren Sie die angegebenen IDs wieder in Text, und speichern Sie das Ergebnis in der destination Spanne.

public override System.Buffers.OperationStatus Decode(System.Collections.Generic.IEnumerable<int> ids, Span<char> destination, out int idsConsumed, out int charsWritten);

override this.Decode : seq<int> * Span<char> * int * int -> System.Buffers.OperationStatus

Public Overrides Function Decode (ids As IEnumerable(Of Integer), destination As Span(Of Char), ByRef idsConsumed As Integer, ByRef charsWritten As Integer) As OperationStatus

Parameter

ids: IEnumerable<Int32>

Die Liste der IDs, die wir decodieren möchten.

destination: Span<Char>

Der Bereich zum Speichern des decodierten Texts.

idsConsumed: Int32

Die Anzahl der während der Decodierung verbrauchten IDs.

charsWritten: Int32

Die Anzahl der Zeichen, die in den Zielbereich geschrieben wurden.

Gibt zurück

OperationStatus

Der Vorgangsstatus gibt an, ob alle IDs erfolgreich decodiert wurden oder ob das destination gesamte decodierte Ergebnis zu klein ist.

Gilt für:

Decode(IEnumerable<Int32>, Span<Char>, Boolean, Int32, Int32)

Quelle:: WordPieceTokenizer.cs

Quelle:: WordPieceTokenizer.cs

Quelle:: WordPieceTokenizer.cs

Decodieren Sie die angegebenen IDs wieder in Text, und speichern Sie das Ergebnis in der destination Spanne.

public System.Buffers.OperationStatus Decode(System.Collections.Generic.IEnumerable<int> ids, Span<char> destination, bool skipSpecialTokens, out int idsConsumed, out int charsWritten);

override this.Decode : seq<int> * Span<char> * bool * int * int -> System.Buffers.OperationStatus

Public Function Decode (ids As IEnumerable(Of Integer), destination As Span(Of Char), skipSpecialTokens As Boolean, ByRef idsConsumed As Integer, ByRef charsWritten As Integer) As OperationStatus

Parameter

ids: IEnumerable<Int32>

Die Liste der IDs, die wir decodieren möchten.

destination: Span<Char>

Der Bereich zum Speichern des decodierten Texts.

skipSpecialTokens: Boolean

Geben Sie an, ob die speziellen Token während der Decodierung übersprungen werden sollen.

idsConsumed: Int32

Die Anzahl der während der Decodierung verbrauchten IDs.

charsWritten: Int32

Die Anzahl der Zeichen, die in den Zielbereich geschrieben wurden.

Gibt zurück

OperationStatus

Der Vorgangsstatus gibt an, ob alle IDs erfolgreich decodiert wurden oder ob das destination gesamte decodierte Ergebnis zu klein ist.

Gilt für:

Decode(IEnumerable<Int32>)

Quelle:: WordPieceTokenizer.cs

Quelle:: WordPieceTokenizer.cs

Quelle:: WordPieceTokenizer.cs

Decodieren Sie die angegebenen IDs zurück zu einer Zeichenfolge.

public override string Decode(System.Collections.Generic.IEnumerable<int> ids);

override this.Decode : seq<int> -> string

Public Overrides Function Decode (ids As IEnumerable(Of Integer)) As String

Parameter

ids: IEnumerable<Int32>

Die Liste der IDs, die wir decodieren möchten.

Gibt zurück

String

Die decodierte Zeichenfolge.

Gilt für:

Decode(IEnumerable<Int32>, Boolean)

Quelle:: WordPieceTokenizer.cs

Quelle:: WordPieceTokenizer.cs

Quelle:: WordPieceTokenizer.cs

Decodieren Sie die angegebenen IDs zurück zu einer Zeichenfolge.

public string Decode(System.Collections.Generic.IEnumerable<int> ids, bool skipSpecialTokens);

override this.Decode : seq<int> * bool -> string

Public Function Decode (ids As IEnumerable(Of Integer), skipSpecialTokens As Boolean) As String

Parameter

ids: IEnumerable<Int32>

Die Liste der IDs, die wir decodieren möchten.

skipSpecialTokens: Boolean

Geben Sie an, ob die speziellen Token während der Decodierung übersprungen werden sollen.

Gibt zurück

String

Die decodierte Zeichenfolge.

Gilt für: