Idioma

EncodedToken(Int32, String, Range) Construtor

Definição

Construa um novo objeto Token usando o valor do token, a ID e o mapeamento de deslocamento para a cadeia de caracteres original.

public EncodedToken(int id, string value, Range offset);
new Microsoft.ML.Tokenizers.EncodedToken : int * string * Range -> Microsoft.ML.Tokenizers.EncodedToken
Public Sub New (id As Integer, value As String, offset As Range)

Parâmetros

id
Int32

O valor da ID associado ao token.

value
String

O valor da cadeia de caracteres do token.

offset
Range

O mapeamento de deslocamento para a cadeia de caracteres original.

Aplica-se a