CodeGenTokenizer.PreTokenizer Propiedad
Definición
Importante
Parte de la información hace referencia a la versión preliminar del producto, que puede haberse modificado sustancialmente antes de lanzar la versión definitiva. Microsoft no otorga ninguna garantía, explícita o implícita, con respecto a la información proporcionada aquí.
Obtiene el preTokenizer usado por el tokenizador.
public override Microsoft.ML.Tokenizers.PreTokenizer? PreTokenizer { get; }member this.PreTokenizer : Microsoft.ML.Tokenizers.PreTokenizerPublic Overrides ReadOnly Property PreTokenizer As PreTokenizer