BpeDecoder Klasse
Definition
Wichtig
Einige Informationen beziehen sich auf Vorabversionen, die vor dem Release ggf. grundlegend überarbeitet werden. Microsoft übernimmt hinsichtlich der hier bereitgestellten Informationen keine Gewährleistungen, seien sie ausdrücklich oder konkludent.
Ermöglicht die Decodierung der ursprünglichen BPE durch Verknüpfen aller Token und ersetzen sie dann das Suffix, das zum Identifizieren des Wortendes verwendet wird, durch Leerzeichen.
public sealed class BpeDecoder : Microsoft.ML.Tokenizers.TokenizerDecoder
type BpeDecoder = class
inherit TokenizerDecoder
Public NotInheritable Class BpeDecoder
Inherits TokenizerDecoder
- Vererbung
Konstruktoren
| BpeDecoder() |
Erstellen Sie ein neues Bpe-Decoderobjekt. |
| BpeDecoder(String) |
Erstellen Sie ein neues Bpe-Decoderobjekt. |
Methoden
| Decode(IEnumerable<String>) |
Decodieren Sie die ursprüngliche BPE, indem Sie alle Token verknüpfen und dann das Suffix ersetzen, das zum Identifizieren des Wortendes verwendet wird, durch Leerzeichen. |