BertTokenizer.CreateTokenTypeIdsFromSequences Método
Definição
Importante
Algumas informações se referem a produtos de pré-lançamento que podem ser substancialmente modificados antes do lançamento. A Microsoft não oferece garantias, expressas ou implícitas, das informações aqui fornecidas.
Sobrecargas
| Nome | Description |
|---|---|
| CreateTokenTypeIdsFromSequences(IEnumerable<Int32>, IEnumerable<Int32>) |
Crie uma máscara das duas sequências passadas para serem usadas em uma tarefa de classificação de par de sequências. Uma máscara de par de sequência BERT tem o seguinte formato: 0 0 0 0 0 0 0 0 0 0 0 1 1 1 1 1 1 1 1 1 | primeira sequência | segunda sequência | Se |
| CreateTokenTypeIdsFromSequences(IEnumerable<Int32>, Span<Int32>, Int32, IEnumerable<Int32>) |
CreateTokenTypeIdsFromSequences(IEnumerable<Int32>, IEnumerable<Int32>)
- Origem:
- BertTokenizer.cs
- Origem:
- BertTokenizer.cs
- Origem:
- BertTokenizer.cs
Crie uma máscara das duas sequências passadas para serem usadas em uma tarefa de classificação de par de sequências. Uma máscara de par de sequência BERT tem o seguinte formato: 0 0 0 0 0 0 0 0 0 0 0 1 1 1 1 1 1 1 1 1 | primeira sequência | segunda sequência | Se additionalTokenIds for nulo, esse método retornará apenas a primeira parte das IDs de tipo (0s).
public System.Collections.Generic.IReadOnlyList<int> CreateTokenTypeIdsFromSequences(System.Collections.Generic.IEnumerable<int> tokenIds, System.Collections.Generic.IEnumerable<int>? additionalTokenIds = default);
member this.CreateTokenTypeIdsFromSequences : seq<int> * seq<int> -> System.Collections.Generic.IReadOnlyList<int>
Public Function CreateTokenTypeIdsFromSequences (tokenIds As IEnumerable(Of Integer), Optional additionalTokenIds As IEnumerable(Of Integer) = Nothing) As IReadOnlyList(Of Integer)
Parâmetros
- tokenIds
- IEnumerable<Int32>
Lista de IDs de token para a primeira sequência.
- additionalTokenIds
- IEnumerable<Int32>
Lista opcional de IDs de token para a segunda sequência.
Retornos
Lista de IDs de tipo de token de acordo com as sequências fornecidas.
Exceções
Quando tokenIds é nulo.
Aplica-se a
CreateTokenTypeIdsFromSequences(IEnumerable<Int32>, Span<Int32>, Int32, IEnumerable<Int32>)
- Origem:
- BertTokenizer.cs
- Origem:
- BertTokenizer.cs
- Origem:
- BertTokenizer.cs
public System.Buffers.OperationStatus CreateTokenTypeIdsFromSequences(System.Collections.Generic.IEnumerable<int> tokenIds, Span<int> destination, out int valuesWritten, System.Collections.Generic.IEnumerable<int>? additionalTokenIds = default);
member this.CreateTokenTypeIdsFromSequences : seq<int> * Span<int> * int * seq<int> -> System.Buffers.OperationStatus
Public Function CreateTokenTypeIdsFromSequences (tokenIds As IEnumerable(Of Integer), destination As Span(Of Integer), ByRef valuesWritten As Integer, Optional additionalTokenIds As IEnumerable(Of Integer) = Nothing) As OperationStatus
Parâmetros
- tokenIds
- IEnumerable<Int32>
- valuesWritten
- Int32
- additionalTokenIds
- IEnumerable<Int32>