TokenizingByCharactersEstimator Classe

Definizione

Spazio dei nomi:

Microsoft.ML.Transforms.Text

Assembly:

Microsoft.ML.Transforms.dll

Pacchetto:

Microsoft.ML v3.0.1

IEstimator<TTransformer>per .TokenizingByCharactersTransformer

public sealed class TokenizingByCharactersEstimator : Microsoft.ML.Data.TrivialEstimator<Microsoft.ML.Transforms.Text.TokenizingByCharactersTransformer>

type TokenizingByCharactersEstimator = class
    inherit TrivialEstimator<TokenizingByCharactersTransformer>

Public NotInheritable Class TokenizingByCharactersEstimator
Inherits TrivialEstimator(Of TokenizingByCharactersTransformer)

Ereditarietà

Object

TrivialEstimator<TokenizingByCharactersTransformer>

TokenizingByCharactersEstimator

Commenti

Caratteristiche dello strumento di stima

Questo strumento di stima deve esaminare i dati per eseguire il training dei relativi parametri?	Sì
Tipo di dati della colonna di input	Scalare o vettore di testo
Tipo di dati della colonna di output	Vettore a dimensione variabile del tipo di chiave .
Esportabile in ONNX	Sì

Lo strumento di stima tokenzza i caratteri suddividendo il testo in sequenze di caratteri usando una finestra scorrevole. Durante il training, lo strumento di stima compila un dizionario coppie chiave-valore con le sequenze di caratteri rilevate.

L'oggetto TokenizingByCharactersTransformer risultante dall'adattamento dell'oggetto estimator crea una nuova colonna, denominata come specificato nei parametri del nome della colonna di output, che contiene le chiavi delle sequenze di caratteri rilevati nell'input.

Vedere la sezione Vedere anche i collegamenti agli esempi di utilizzo.

Metodi

Fit(IDataView)	IEstimator<TTransformer>per .TokenizingByCharactersTransformer (Ereditato da TrivialEstimator<TTransformer>)
GetOutputSchema(SchemaShape)	Restituisce l'oggetto SchemaShape dello schema che verrà prodotto dal trasformatore. Usato per la propagazione e la verifica dello schema in una pipeline.

Metodi di estensione

AppendCacheCheckpoint<TTrans>(IEstimator<TTrans>, IHostEnvironment)

Aggiungere un "checkpoint di memorizzazione nella cache" alla catena di stima. Ciò garantisce che gli estimatori downstream vengano sottoposti a training in base ai dati memorizzati nella cache. È utile avere un checkpoint di memorizzazione nella cache prima che i formatori eseseguono più passaggi di dati.

WithOnFitDelegate<TTransformer>(IEstimator<TTransformer>, Action<TTransformer>)

Dato un estimator, restituire un oggetto wrapping che chiamerà un delegato una volta Fit(IDataView) chiamato. È spesso importante che uno strumento di stima restituisca informazioni sull'adattamento, motivo per cui il Fit(IDataView) metodo restituisce un oggetto tipizzato in modo specifico, anziché solo un oggetto generale ITransformer. Tuttavia, allo stesso tempo, IEstimator<TTransformer> vengono spesso formati in pipeline con molti oggetti, quindi potrebbe essere necessario creare una catena di estimatori tramite EstimatorChain<TLastTransformer> dove lo strumento di stima per il quale si vuole ottenere il trasformatore è sepolto in una posizione in questa catena. Per questo scenario, è possibile collegare un delegato che verrà chiamato una volta chiamato fit.

Vedi anche

• TokenizeIntoCharactersAsKeys(TransformsCatalog+TextTransforms, String, String, Boolean)