microsoftml.n_gram:利用n-gram将文本转换为特征

Usage

microsoftml.n_gram(ngram_length: numbers.Real = 1,
    skip_length: numbers.Real = 0, all_lengths: bool = True,
    max_num_terms: list = [10000000], weighting: str = 'Tf')

Description

从文本中提取NGram,并用字典转换为矢量。

Arguments

ngram_length

N gram 长度(设置)。

skip_length

构建n-Gram时最多可跳过的代币数量(设置)。

all_lengths

是包含所有ngram长度(最高可达NgramLength)还是只包含Ngram长度(设置)。

max_num_terms

字典中存储的最大nGram数量(设置)。

加权

权重标准(设置)。