microsoftml.n_gram_hash: Converte texto em recursos usando n-gramas hasheados

Usage

microsoftml.n_gram_hash(hash_bits: numbers.Real = 16,
    ngram_length: numbers.Real = 1, skip_length: numbers.Real = 0,
    all_lengths: bool = True, seed: numbers.Real = 314489979,
    ordered: bool = True, invert_hash: numbers.Real = 0)

Description

Extrai NGrams do texto e os converte para vetores usando o truque de hashing.

Argumentos

hash_bits

Número de bits a serem colocados em hash. Deve estar entre 1 e 30, inclusive. (cenários).

ngram_length

Comprimento do Ngram (configurações).

skip_length

Número máximo de tokens a pular ao construir um ngram (configurações).

all_lengths

Se deve incluir todos os comprimentos de ngram até ngramLength ou apenas ngramLength (configurações).

seed

Hashing seed (configurações).

pedido

Se a posição de cada coluna de origem deve ser incluída no hash (quando há várias colunas de origem). (cenários).

invert_hash

Limite o número de chaves usadas para gerar o nome do slot a esse número. 0 significa sem invert hashing, -1 significa sem limite. (cenários).

Conteúdo relacionado

  • Last updated on