BertTokenizer.SeparatorToken プロパティ
定義
重要
一部の情報は、リリース前に大きく変更される可能性があるプレリリースされた製品に関するものです。 Microsoft は、ここに記載されている情報について、明示または黙示を問わず、一切保証しません。
区切り記号トークンを取得します。これは、複数のシーケンスからシーケンスを構築するときに使用されます。たとえば、シーケンス分類用またはテキスト用の 2 つのシーケンスと、質問への回答に関する質問などです。 また、特殊なトークンを使用して構築されたシーケンスの最後のトークンとしても使用されます。
public string SeparatorToken { get; }
member this.SeparatorToken : string
Public ReadOnly Property SeparatorToken As String