microsoftml.n_gram: n그램을 이용해 텍스트를 특징으로 변환합니다

Usage

microsoftml.n_gram(ngram_length: numbers.Real = 1,
    skip_length: numbers.Real = 0, all_lengths: bool = True,
    max_num_terms: list = [10000000], weighting: str = 'Tf')

설명

텍스트에서 NGram을 추출하여 사전을 사용해 벡터로 변환합니다.

Arguments

ngram_length

N그램 길이(설정).

skip_length

n-그라마를 구성할 때 건너뛸 수 있는 최대 토큰 수(설정).

all_lengths

모든 ngram 길이를 NgramLength까지 포함할지, 아니면 NgramLength만 포함할지(설정).

max_num_terms

사전에 저장할 수 있는 최대 n그램 수(설정).

가중치

가중치 기준(설정).

관련 콘텐츠

• microsoftml.n_gram_hash: 해시된 n-gram 사용하여 텍스트를 기능으로 변환
• microsoftml.featurize_text: 텍스트 열을 숫자 기능으로 변환