Lenguaje

EncodedToken(Int32, String, Range) Constructor

Definición

Construya un nuevo objeto Token mediante el valor del token, el identificador y la asignación de desplazamiento a la cadena original.

public EncodedToken(int id, string value, Range offset);
new Microsoft.ML.Tokenizers.EncodedToken : int * string * Range -> Microsoft.ML.Tokenizers.EncodedToken
Public Sub New (id As Integer, value As String, offset As Range)

Parámetros

id
Int32

Valor id asociado al token.

value
String

Valor de cadena de token.

offset
Range

Asignación de desplazamiento a la cadena original.

Se aplica a