WordPieceTokenizer.CreateAsync Metodo
Definizione
Importante
Alcune informazioni sono relative alla release non definitiva del prodotto, che potrebbe subire modifiche significative prima della release definitiva. Microsoft non riconosce alcuna garanzia, espressa o implicita, in merito alle informazioni qui fornite.
Overload
| Nome | Descrizione |
|---|---|
| CreateAsync(Stream, WordPieceOptions, CancellationToken) |
Creare una nuova istanza della WordPieceTokenizer classe in modo asincrono. |
| CreateAsync(String, WordPieceOptions, CancellationToken) |
Creare una nuova istanza della WordPieceTokenizer classe in modo asincrono. |
CreateAsync(Stream, WordPieceOptions, CancellationToken)
- Origine:
- WordPieceTokenizer.cs
- Origine:
- WordPieceTokenizer.cs
- Origine:
- WordPieceTokenizer.cs
Creare una nuova istanza della WordPieceTokenizer classe in modo asincrono.
public static System.Threading.Tasks.Task<Microsoft.ML.Tokenizers.WordPieceTokenizer> CreateAsync(System.IO.Stream vocabStream, Microsoft.ML.Tokenizers.WordPieceOptions? options = default, System.Threading.CancellationToken cancellationToken = default);static member CreateAsync : System.IO.Stream * Microsoft.ML.Tokenizers.WordPieceOptions * System.Threading.CancellationToken -> System.Threading.Tasks.Task<Microsoft.ML.Tokenizers.WordPieceTokenizer>Public Shared Function CreateAsync (vocabStream As Stream, Optional options As WordPieceOptions = Nothing, Optional cancellationToken As CancellationToken = Nothing) As Task(Of WordPieceTokenizer)Parametri
- vocabStream
- Stream
Percorso del file vocab WordPiece.
- options
- WordPieceOptions
Opzioni da usare per il tokenizer WordPiece.
- cancellationToken
- CancellationToken
Token di annullamento.
Valori restituiti
Nuova istanza della classe WordPieceTokenizer.
Commenti
Se è PreTokenizer Null, verrà usato il pre-tokenizzatore di spazi vuoti. Quando si crea il tokenizer, assicurarsi che il flusso del vocabolario venga originato da un provider attendibile.
Si applica a
CreateAsync(String, WordPieceOptions, CancellationToken)
- Origine:
- WordPieceTokenizer.cs
- Origine:
- WordPieceTokenizer.cs
- Origine:
- WordPieceTokenizer.cs
Creare una nuova istanza della WordPieceTokenizer classe in modo asincrono.
public static System.Threading.Tasks.Task<Microsoft.ML.Tokenizers.WordPieceTokenizer> CreateAsync(string vocabFilePath, Microsoft.ML.Tokenizers.WordPieceOptions? options = default, System.Threading.CancellationToken cancellationToken = default);static member CreateAsync : string * Microsoft.ML.Tokenizers.WordPieceOptions * System.Threading.CancellationToken -> System.Threading.Tasks.Task<Microsoft.ML.Tokenizers.WordPieceTokenizer>Public Shared Function CreateAsync (vocabFilePath As String, Optional options As WordPieceOptions = Nothing, Optional cancellationToken As CancellationToken = Nothing) As Task(Of WordPieceTokenizer)Parametri
- vocabFilePath
- String
Percorso del file vocab WordPiece.
- options
- WordPieceOptions
Opzioni da usare per il tokenizer WordPiece.
- cancellationToken
- CancellationToken
Token di annullamento.
Valori restituiti
Nuova istanza della classe WordPieceTokenizer.
Commenti
Se è PreTokenizer Null, verrà usato il pre-tokenizzatore di spazi vuoti. Quando si crea il tokenizer, assicurarsi che il file del vocabolario venga originato da un provider attendibile.