TokenizingByCharactersEstimator Klasa

Definicja

Przestrzeń nazw:

Microsoft.ML.Transforms.Text

Zestaw:

Microsoft.ML.Transforms.dll

Pakiet:

Microsoft.ML v3.0.1

IEstimator<TTransformer>dla .TokenizingByCharactersTransformer

public sealed class TokenizingByCharactersEstimator : Microsoft.ML.Data.TrivialEstimator<Microsoft.ML.Transforms.Text.TokenizingByCharactersTransformer>

type TokenizingByCharactersEstimator = class
    inherit TrivialEstimator<TokenizingByCharactersTransformer>

Public NotInheritable Class TokenizingByCharactersEstimator
Inherits TrivialEstimator(Of TokenizingByCharactersTransformer)

Dziedziczenie

Object

TrivialEstimator<TokenizingByCharactersTransformer>

TokenizingByCharactersEstimator

Uwagi

Charakterystyka narzędzia do szacowania

Czy ten narzędzie do szacowania musi przyjrzeć się danym, aby wytrenować jego parametry?	Tak
Typ danych kolumny wejściowej	Skalarny lub wektor tekstu
Typ danych kolumny wyjściowej	Wektor klucza o zmiennym rozmiarze.
Eksportowanie do pliku ONNX	Tak

Narzędzie do szacowania tokenizuje znaki, dzieląc tekst na sekwencje znaków przy użyciu okna przesuwanego. Podczas trenowania narzędzie do szacowania tworzy słownik pary klucz-wartość ze napotkanymi sekwencjami znaków.

Wynik TokenizingByCharactersTransformer dopasowania narzędzia do szacowania tworzy nową kolumnę o nazwie określonej w parametrach nazwy kolumny wyjściowej, która zawiera klucze sekwencji znaków, które zostały napotkane w danych wejściowych.

Zapoznaj się z sekcją Zobacz również, aby uzyskać linki do przykładów użycia.

Metody

Fit(IDataView)	IEstimator<TTransformer>dla .TokenizingByCharactersTransformer (Odziedziczone po TrivialEstimator<TTransformer>)
GetOutputSchema(SchemaShape)	SchemaShape Zwraca schemat, który zostanie wygenerowany przez transformator. Służy do propagacji schematu i weryfikacji w potoku.

Metody rozszerzania

AppendCacheCheckpoint<TTrans>(IEstimator<TTrans>, IHostEnvironment)

Dołącz punkt kontrolny buforowania do łańcucha narzędzia do szacowania. Zapewni to, że narzędzia do szacowania podrzędnego zostaną wytrenowane względem buforowanych danych. Warto mieć punkt kontrolny buforowania, zanim trenerzy przejmą wiele danych.

WithOnFitDelegate<TTransformer>(IEstimator<TTransformer>, Action<TTransformer>)

Biorąc pod uwagę narzędzie do szacowania, zwróć obiekt opakowujący, który wywoła delegata po Fit(IDataView) wywołaniu. Często ważne jest, aby narzędzie do szacowania zwracało informacje o tym, co było odpowiednie, dlatego Fit(IDataView) metoda zwraca specjalnie wpisany obiekt, a nie tylko ogólną ITransformerwartość . Jednak w tym samym czasie IEstimator<TTransformer> często są tworzone w potoki z wieloma obiektami, więc może być konieczne utworzenie łańcucha narzędzi do szacowania za pośrednictwem EstimatorChain<TLastTransformer> miejsca, w którym narzędzie do szacowania, dla którego chcemy uzyskać transformator jest pochowany gdzieś w tym łańcuchu. W tym scenariuszu możemy za pomocą tej metody dołączyć delegata, który zostanie wywołany po wywołaniu dopasowania.

Zobacz też

• TokenizeIntoCharactersAsKeys(TransformsCatalog+TextTransforms, String, String, Boolean)