Language

Split クラス

定義

この分割には、基になる分割トークンと、元の文字列内のオフセットが含まれます。 これらのオフセットは、 original 参照内にあります。 また、現在の分割に関連付けられている Token も含まれます。

public sealed class Split : IEquatable<Microsoft.ML.Tokenizers.Split>
type Split = class
    interface IEquatable<Split>
Public NotInheritable Class Split
Implements IEquatable(Of Split)
継承
Split
実装

コンストラクター

名前 説明
Split(String, ValueTuple<Int32,Int32>)

トークンとオフセットを使用して Split オブジェクトを作成する

プロパティ

名前 説明
Offset

元の文字列へのオフセット マッピングを返します。

TokenString

基になる分割トークンを取得します。 各 SubString はトークンによって表され、最終的には元の入力文字列のさまざまな部分を表す多くの SubString を運んでいる可能性があります。

メソッド

名前 説明
Equals(Split)

現在の Split オブジェクトが別の Split オブジェクトと等しいかどうかを示します。

適用対象