BpeTokenizer.Normalizer プロパティ

定義

名前空間:: Microsoft.ML.Tokenizers

アセンブリ:: Microsoft.ML.Tokenizers.dll

パッケージ:: Microsoft.ML.Tokenizers v1.0.1

パッケージ:: Microsoft.ML.Tokenizers v0.22.0

パッケージ:: Microsoft.ML.Tokenizers v2.0.0-preview.1.25125.4

ソース:: BPETokenizer.cs

ソース:: BPETokenizer.cs

ソース:: BPETokenizer.cs

重要

一部の情報は、リリース前に大きく変更される可能性があるプレリリースされた製品に関するものです。 Microsoft は、ここに記載されている情報について、明示または黙示を問わず、一切保証しません。

トークナイザーで使用されているノーマライザーを取得します。

public override Microsoft.ML.Tokenizers.Normalizer? Normalizer { get; }

member this.Normalizer : Microsoft.ML.Tokenizers.Normalizer

Public Overrides ReadOnly Property Normalizer As Normalizer

プロパティ値

適用対象