語言

AddedToken 結構

定義

代表使用者在現有模型詞彙上新增的一個標記。 AddedToken 可以設定在各種情況下指定它們應該有的行為,例如:

  • 是否應該只對應單字
  • 是否要在左側或右側加入任何空白區
public struct AddedToken : IEquatable<Microsoft.ML.Tokenizers.AddedToken>
type AddedToken = struct
Public Structure AddedToken
Implements IEquatable(Of AddedToken)
繼承
AddedToken
實作

建構函式

名稱 Description
AddedToken()

建立一個新的 AddedToken 物件。

AddedToken(String, Boolean)

從給定內容建立一個新的 AddedToken 物件,並指定是否打算作為特殊標記。 特殊標記預設不會正規化。

屬性

名稱 Description
Content

取得或設定新增代幣的內容

方法

名稱 Description
Equals(AddedToken)

判斷兩個標記實例是否相等。

GetHashCode()

回傳目前標記的雜湊碼。

操作員

名稱 Description
Implicit(String to AddedToken)

定義字串物件隱式轉換為 AddedToken。

適用於