EnglishRoberta Classe
Definição
Importante
Algumas informações se referem a produtos de pré-lançamento que podem ser substancialmente modificados antes do lançamento. A Microsoft não oferece garantias, expressas ou implícitas, das informações aqui fornecidas.
Represente o modelo de codificação de par de bytes.
public sealed class EnglishRoberta : Microsoft.ML.Tokenizers.Modeltype EnglishRoberta = class
inherit ModelPublic NotInheritable Class EnglishRoberta
Inherits Model- Herança
Construtores
| Nome | Description |
|---|---|
| EnglishRoberta(Stream, Stream, Stream) |
Construa o objeto tokenizer a ser usado com o modelo robert inglês. |
| EnglishRoberta(String, String, String) |
Construa o objeto tokenizer a ser usado com o modelo robert inglês. |
Propriedades
| Nome | Description |
|---|---|
| PadIndex |
Obtém o índice do símbolo do painel dentro da lista de símbolos. |
| SymbolsCount |
Obtém o comprimento da lista de símbolos. |
Métodos
| Nome | Description |
|---|---|
| AddMaskSymbol(String) |
Adicione o símbolo de máscara à lista de símbolos. |
| GetTrainer() |
Obtém um objeto de treinador a ser usado no treinamento do modelo e gera o vocabulário e mescla dados. |
| GetVocab() |
Obtém os tokens de mapeamento de dicionário para Ids. |
| GetVocabSize() |
Obtém o tamanho do dicionário que mapeia tokens para Ids. |
| IdsToOccurrenceRanks(IReadOnlyList<Int32>) |
Converta uma lista de IDs de tokens em classificações de ocorrência mais altas. |
| IdsToOccurrenceValues(IReadOnlyList<Int32>) |
Converta uma lista de IDs de tokens em valores de ocorrência mais altos. |
| IdToToken(Int32, Boolean) |
Mapeie a ID tokenizada para o token. |
| OccurrenceRanksIds(IReadOnlyList<Int32>) |
Converter uma lista das classificações de ocorrência mais altas na lista de IDs de tokens. |
| Save(String, String) |
Salve os dados do modelo no vocabulário, mesclagens e arquivos de mapeamento de ocorrência. |
| Tokenize(String) |
Tokenize uma cadeia de caracteres de sequência para uma lista de tokens. |
| TokenToId(String) |
Mapeie o token para a ID tokenizada. |