microsoftml.n_gram_hash: Przekształca tekst w cechy za pomocą zahashowanych n-gramów

Usage

microsoftml.n_gram_hash(hash_bits: numbers.Real = 16,
    ngram_length: numbers.Real = 1, skip_length: numbers.Real = 0,
    all_lengths: bool = True, seed: numbers.Real = 314489979,
    ordered: bool = True, invert_hash: numbers.Real = 0)

Description

Pobiera NGramy z tekstu i konwertuje je na wektor za pomocą triku z haszowaniem.

Arguments

hash_bits

Liczba bitów do skrótu. Musi należeć do przedziału od 1 do 30 włącznie. (ustawienia).

ngram_length

Długość Ngram (ustawienia).

skip_length

Maksymalna liczba tokenów do pominięcia podczas konstruowania ngrama (ustawienia).

all_lengths

Czy uwzględnić wszystkie długości ngramów do długości ngram, czy tylko ngramDługość (ustawienia).

seed

Hashing seed (ustawienia).

uporządkowany

Określa, czy pozycja każdej kolumny źródłowej powinna być uwzględniona w skrótie (jeśli istnieje wiele kolumn źródłowych). (ustawienia).

invert_hash

Ogranicz liczbę kluczy używanych do wygenerowania nazwy slotu do tej liczby. 0 oznacza brak inwers hashingu, -1 oznacza brak limitu. (ustawienia).

Treści powiązane

  • Last updated on