WordPieceTokenizer.CreateAsync Metoda
Definicja
Ważne
Niektóre informacje odnoszą się do produktu w wersji wstępnej, który może zostać znacząco zmodyfikowany przed wydaniem. Firma Microsoft nie udziela żadnych gwarancji, jawnych lub domniemanych, w odniesieniu do informacji podanych w tym miejscu.
Przeciążenia
| Nazwa | Opis |
|---|---|
| CreateAsync(Stream, WordPieceOptions, CancellationToken) |
Utwórz nowe wystąpienie WordPieceTokenizer klasy asynchronicznie. |
| CreateAsync(String, WordPieceOptions, CancellationToken) |
Utwórz nowe wystąpienie WordPieceTokenizer klasy asynchronicznie. |
CreateAsync(Stream, WordPieceOptions, CancellationToken)
- Źródło:
- WordPieceTokenizer.cs
- Źródło:
- WordPieceTokenizer.cs
- Źródło:
- WordPieceTokenizer.cs
Utwórz nowe wystąpienie WordPieceTokenizer klasy asynchronicznie.
public static System.Threading.Tasks.Task<Microsoft.ML.Tokenizers.WordPieceTokenizer> CreateAsync(System.IO.Stream vocabStream, Microsoft.ML.Tokenizers.WordPieceOptions? options = default, System.Threading.CancellationToken cancellationToken = default);static member CreateAsync : System.IO.Stream * Microsoft.ML.Tokenizers.WordPieceOptions * System.Threading.CancellationToken -> System.Threading.Tasks.Task<Microsoft.ML.Tokenizers.WordPieceTokenizer>Public Shared Function CreateAsync (vocabStream As Stream, Optional options As WordPieceOptions = Nothing, Optional cancellationToken As CancellationToken = Nothing) As Task(Of WordPieceTokenizer)Parametry
- vocabStream
- Stream
Ścieżka do pliku vocab programu WordPiece.
- options
- WordPieceOptions
Opcje do użycia dla tokenizatora programu WordPiece.
- cancellationToken
- CancellationToken
Token anulowania.
Zwraca
Nowe wystąpienie WordPieceTokenizer klasy.
Uwagi
Jeśli parametr PreTokenizer ma wartość null, zostanie użyty pre-tokenizer odstępu. Podczas tworzenia tokenizatora upewnij się, że strumień słownictwa jest pozyskiwany od zaufanego dostawcy.
Dotyczy
CreateAsync(String, WordPieceOptions, CancellationToken)
- Źródło:
- WordPieceTokenizer.cs
- Źródło:
- WordPieceTokenizer.cs
- Źródło:
- WordPieceTokenizer.cs
Utwórz nowe wystąpienie WordPieceTokenizer klasy asynchronicznie.
public static System.Threading.Tasks.Task<Microsoft.ML.Tokenizers.WordPieceTokenizer> CreateAsync(string vocabFilePath, Microsoft.ML.Tokenizers.WordPieceOptions? options = default, System.Threading.CancellationToken cancellationToken = default);static member CreateAsync : string * Microsoft.ML.Tokenizers.WordPieceOptions * System.Threading.CancellationToken -> System.Threading.Tasks.Task<Microsoft.ML.Tokenizers.WordPieceTokenizer>Public Shared Function CreateAsync (vocabFilePath As String, Optional options As WordPieceOptions = Nothing, Optional cancellationToken As CancellationToken = Nothing) As Task(Of WordPieceTokenizer)Parametry
- vocabFilePath
- String
Ścieżka do pliku vocab programu WordPiece.
- options
- WordPieceOptions
Opcje do użycia dla tokenizatora programu WordPiece.
- cancellationToken
- CancellationToken
Token anulowania.
Zwraca
Nowe wystąpienie WordPieceTokenizer klasy.
Uwagi
Jeśli parametr PreTokenizer ma wartość null, zostanie użyty pre-tokenizer odstępu. Podczas tworzenia tokenizatora upewnij się, że plik słownictwa pochodzi od zaufanego dostawcy.