Idioma

BertTokenizer.CreateTokenTypeIdsFromSequences Método

Definição

Sobrecargas

Nome Description
CreateTokenTypeIdsFromSequences(IEnumerable<Int32>, IEnumerable<Int32>)

Crie uma máscara das duas sequências passadas para serem usadas em uma tarefa de classificação de par de sequências. Uma máscara de par de sequência BERT tem o seguinte formato: 0 0 0 0 0 0 0 0 0 0 0 1 1 1 1 1 1 1 1 1 | primeira sequência | segunda sequência | Se additionalTokenIds for nulo, esse método retornará apenas a primeira parte das IDs de tipo (0s).

CreateTokenTypeIdsFromSequences(IEnumerable<Int32>, Span<Int32>, Int32, IEnumerable<Int32>)

CreateTokenTypeIdsFromSequences(IEnumerable<Int32>, IEnumerable<Int32>)

Origem:
BertTokenizer.cs
Origem:
BertTokenizer.cs
Origem:
BertTokenizer.cs

Crie uma máscara das duas sequências passadas para serem usadas em uma tarefa de classificação de par de sequências. Uma máscara de par de sequência BERT tem o seguinte formato: 0 0 0 0 0 0 0 0 0 0 0 1 1 1 1 1 1 1 1 1 | primeira sequência | segunda sequência | Se additionalTokenIds for nulo, esse método retornará apenas a primeira parte das IDs de tipo (0s).

public System.Collections.Generic.IReadOnlyList<int> CreateTokenTypeIdsFromSequences(System.Collections.Generic.IEnumerable<int> tokenIds, System.Collections.Generic.IEnumerable<int>? additionalTokenIds = default);
member this.CreateTokenTypeIdsFromSequences : seq<int> * seq<int> -> System.Collections.Generic.IReadOnlyList<int>
Public Function CreateTokenTypeIdsFromSequences (tokenIds As IEnumerable(Of Integer), Optional additionalTokenIds As IEnumerable(Of Integer) = Nothing) As IReadOnlyList(Of Integer)

Parâmetros

tokenIds
IEnumerable<Int32>

Lista de IDs de token para a primeira sequência.

additionalTokenIds
IEnumerable<Int32>

Lista opcional de IDs de token para a segunda sequência.

Retornos

Lista de IDs de tipo de token de acordo com as sequências fornecidas.

Exceções

Quando tokenIds é nulo.

Aplica-se a

CreateTokenTypeIdsFromSequences(IEnumerable<Int32>, Span<Int32>, Int32, IEnumerable<Int32>)

Origem:
BertTokenizer.cs
Origem:
BertTokenizer.cs
Origem:
BertTokenizer.cs
public System.Buffers.OperationStatus CreateTokenTypeIdsFromSequences(System.Collections.Generic.IEnumerable<int> tokenIds, Span<int> destination, out int valuesWritten, System.Collections.Generic.IEnumerable<int>? additionalTokenIds = default);
member this.CreateTokenTypeIdsFromSequences : seq<int> * Span<int> * int * seq<int> -> System.Buffers.OperationStatus
Public Function CreateTokenTypeIdsFromSequences (tokenIds As IEnumerable(Of Integer), destination As Span(Of Integer), ByRef valuesWritten As Integer, Optional additionalTokenIds As IEnumerable(Of Integer) = Nothing) As OperationStatus

Parâmetros

tokenIds
IEnumerable<Int32>
destination
Span<Int32>
valuesWritten
Int32
additionalTokenIds
IEnumerable<Int32>

Retornos

Aplica-se a