ClassicTokenizer Clase

Definición

Tokenizador basado en gramática que es adecuado para procesar la mayoría de los documentos de idioma europeo. Este tokenizador se implementa mediante Apache Lucene.

public class ClassicTokenizer : Azure.Search.Documents.Indexes.Models.LexicalTokenizer
type ClassicTokenizer = class
    inherit LexicalTokenizer
Public Class ClassicTokenizer
Inherits LexicalTokenizer
Herencia
ClassicTokenizer

Constructores

ClassicTokenizer(String)

Inicializa una nueva instancia de ClassicTokenizer.

Propiedades

MaxTokenLength

Longitud máxima del token. El valor predeterminado es 255. Los tokens que sobrepasen la longitud máxima se dividen. La longitud máxima del token que se puede usar es de 300 caracteres.

Name

Nombre del tokenizador. Solo puede contener letras, dígitos, espacios, guiones o guiones bajos, debe empezar y acabar con caracteres alfanuméricos y no puede superar los 128 caracteres.

(Heredado de LexicalTokenizer)

Se aplica a