SentencePieceTokenizer.ByteFallback 屬性
定義
重要
部分資訊涉及發行前產品,在發行之前可能會有大幅修改。 Microsoft 對此處提供的資訊,不做任何明確或隱含的瑕疵擔保。
指定模型在編碼過程中遇到未知標記時是否會進行位元組回備。
public bool ByteFallback { get; }
member this.ByteFallback : bool
Public ReadOnly Property ByteFallback As Boolean