microsoftml.n_gram: Converte texto em características usando n-gramas

Usage

microsoftml.n_gram(ngram_length: numbers.Real = 1,
    skip_length: numbers.Real = 0, all_lengths: bool = True,
    max_num_terms: list = [10000000], weighting: str = 'Tf')

Description

Extrai NGrams do texto e converte-os em vetor usando dicionário.

Arguments

ngram_length

Comprimento Ngram (definições).

skip_length

Número máximo de tokens a saltar ao construir um ngram (definições).

all_lengths

Se deve incluir todos os comprimentos ngram até NgramLength ou apenas NgramLength (definições).

max_num_terms

Número máximo de ngrams para armazenar no dicionário (definições).

ponderação

Os critérios de ponderação (definições).

Conteúdo relacionado

• microsoftml.n_gram_hash: Converte texto em recursos usando n-gramas em hash
• microsoftml.featurize_text: Converte colunas de texto em recursos numéricos