Share via


TokenizingByCharactersEstimator 클래스

정의

public sealed class TokenizingByCharactersEstimator : Microsoft.ML.Data.TrivialEstimator<Microsoft.ML.Transforms.Text.TokenizingByCharactersTransformer>
type TokenizingByCharactersEstimator = class
    inherit TrivialEstimator<TokenizingByCharactersTransformer>
Public NotInheritable Class TokenizingByCharactersEstimator
Inherits TrivialEstimator(Of TokenizingByCharactersTransformer)
상속
TokenizingByCharactersEstimator

설명

추정기 특성

이 예측 도구는 매개 변수를 학습하기 위해 데이터를 확인해야 합니까?
입력 열 데이터 형식 텍스트의 스칼라 또는 벡터
출력 열 데이터 형식 형식의 가변 크기 벡터입니다.
ONNX로 내보낼 수 있습니다.

추정기는 슬라이딩 윈도우를 사용하여 텍스트를 문자 시퀀스로 분할하여 문자를 토큰화합니다. 학습 중에 예측 도구는 발견된 문자 시퀀스를 사용하여 키-값 쌍 사전을 빌드합니다.

TokenizingByCharactersTransformer 추정기를 맞추면 출력 열 이름 매개 변수에 지정된 대로 이름이 지정된 새 열이 만들어지며, 여기에는 입력에서 발생한 문자 시퀀스의 키가 포함됩니다.

사용 예제에 대한 링크는 참고 섹션을 확인하세요.

메서드

Fit(IDataView)

IEstimator<TTransformer> 을 선택합니다 TokenizingByCharactersTransformer.

(다음에서 상속됨 TrivialEstimator<TTransformer>)
GetOutputSchema(SchemaShape)

변환기에서 SchemaShape 생성할 스키마를 반환합니다. 파이프라인에서 스키마 전파 및 확인에 사용됩니다.

확장 메서드

AppendCacheCheckpoint<TTrans>(IEstimator<TTrans>, IHostEnvironment)

추정기 체인에 '캐싱 검사점'을 추가합니다. 이렇게 하면 다운스트림 추정기가 캐시된 데이터에 대해 학습됩니다. 여러 데이터 전달을 수행하는 트레이너 앞에 캐싱 검사점이 있는 것이 좋습니다.

WithOnFitDelegate<TTransformer>(IEstimator<TTransformer>, Action<TTransformer>)

추정기가 지정된 경우 호출된 대리 Fit(IDataView) 자를 호출할 래핑 개체를 반환합니다. 예측 도구가 적합한 항목에 대한 정보를 반환하는 것이 중요한 경우가 많습니다. 따라서 Fit(IDataView) 메서드는 일반 ITransformer개체가 아닌 구체적으로 형식화된 개체를 반환합니다. 그러나 동시에 IEstimator<TTransformer> 개체가 많은 파이프라인으로 형성되는 경우가 많으므로 변환기를 가져올 추정기가 이 체인의 어딘가에 묻혀 있는 위치를 통해 EstimatorChain<TLastTransformer> 추정기 체인을 빌드해야 할 수 있습니다. 이 시나리오에서는 이 메서드를 통해 fit이 호출되면 호출될 대리자를 연결할 수 있습니다.

적용 대상

추가 정보