microsoftml.n_gram:利用 n-gram 將文字轉換成特徵

使用方式

microsoftml.n_gram(ngram_length: numbers.Real = 1,
    skip_length: numbers.Real = 0, all_lengths: bool = True,
    max_num_terms: list = [10000000], weighting: str = 'Tf')

說明

從文字中擷取 NGram,並利用字典將其轉換為向量。

論點

ngram_length

N Gram 長度(設定)。

skip_length

建構 ngram 時可跳過的最大代幣數量(設定)。

all_lengths

是要包含所有 ngram 長度(直到 NgramLength)還是只包含 NgramLength(設定)。

max_num_terms

字典中可儲存的最大 ngram 數量(設定)。

加權

加權標準(設定)。