AddedToken 結構
定義
重要
部分資訊涉及發行前產品,在發行之前可能會有大幅修改。 Microsoft 對此處提供的資訊,不做任何明確或隱含的瑕疵擔保。
代表使用者在現有模型詞彙上新增的一個標記。 AddedToken 可以設定在各種情況下指定它們應該有的行為,例如:
- 是否應該只對應單字
- 是否要在左側或右側加入任何空白區
public struct AddedToken : IEquatable<Microsoft.ML.Tokenizers.AddedToken>
type AddedToken = struct
Public Structure AddedToken
Implements IEquatable(Of AddedToken)
- 繼承
-
AddedToken
- 實作
建構函式
| 名稱 | Description |
|---|---|
| AddedToken() |
建立一個新的 AddedToken 物件。 |
| AddedToken(String, Boolean) |
從給定內容建立一個新的 AddedToken 物件,並指定是否打算作為特殊標記。 特殊標記預設不會正規化。 |
屬性
| 名稱 | Description |
|---|---|
| Content |
取得或設定新增代幣的內容 |
方法
| 名稱 | Description |
|---|---|
| Equals(AddedToken) |
判斷兩個標記實例是否相等。 |
| GetHashCode() |
回傳目前標記的雜湊碼。 |
操作員
| 名稱 | Description |
|---|---|
| Implicit(String to AddedToken) |
定義字串物件隱式轉換為 AddedToken。 |