Sdílet prostřednictvím


EnglishRoberta Konstruktory

Definice

Přetížení

EnglishRoberta(Stream, Stream, Stream)

Vytvoření objektu tokenizer pro použití s anglickým modelem Robert.

EnglishRoberta(String, String, String)

Vytvoření objektu tokenizer pro použití s anglickým modelem Robert.

EnglishRoberta(Stream, Stream, Stream)

Vytvoření objektu tokenizer pro použití s anglickým modelem Robert.

public EnglishRoberta (System.IO.Stream vocabularyStream, System.IO.Stream mergeStream, System.IO.Stream highestOccurrenceMappingStream);
new Microsoft.ML.Tokenizers.EnglishRoberta : System.IO.Stream * System.IO.Stream * System.IO.Stream -> Microsoft.ML.Tokenizers.EnglishRoberta
Public Sub New (vocabularyStream As Stream, mergeStream As Stream, highestOccurrenceMappingStream As Stream)

Parametry

vocabularyStream
Stream

Datový proud souboru JSON obsahujícího slovník řetězcových klíčů a jejich ID.

mergeStream
Stream

Datový proud souboru obsahujícího seznam dvojic tokenů.

highestOccurrenceMappingStream
Stream

Přemapujte původní ID modelu GPT-2 na pořadí a hodnoty s vysokým výskytem.

Platí pro

EnglishRoberta(String, String, String)

Vytvoření objektu tokenizer pro použití s anglickým modelem Robert.

public EnglishRoberta (string vocabularyPath, string mergePath, string highestOccurrenceMappingPath);
new Microsoft.ML.Tokenizers.EnglishRoberta : string * string * string -> Microsoft.ML.Tokenizers.EnglishRoberta
Public Sub New (vocabularyPath As String, mergePath As String, highestOccurrenceMappingPath As String)

Parametry

vocabularyPath
String

Cesta k souboru JSON obsahující slovník řetězcových klíčů a jejich ID.

mergePath
String

Cesta k souboru obsahující seznam párů tokenů.

highestOccurrenceMappingPath
String

Přemapujte původní ID modelu GPT-2 na pořadí a hodnoty s vysokým výskytem.

Platí pro