Partager via


StandardTokenizer Classe

Définition

Attention

This type is obsolete. Please use StandardTokenizerV2 instead.

Décompose le texte en suivant les règles de segmentation du texte Unicode. Ce générateur de jetons est implémenté à l’aide d’Apache Lucene. http://lucene.apache.org/core/4_10_3/analyzers-common/org/apache/lucene/analysis/standard/StandardTokenizer.html

[Newtonsoft.Json.JsonObject("#Microsoft.Azure.Search.StandardTokenizer")]
[System.Obsolete("This type is obsolete. Please use StandardTokenizerV2 instead.")]
public class StandardTokenizer : Microsoft.Azure.Search.Models.Tokenizer
[<Newtonsoft.Json.JsonObject("#Microsoft.Azure.Search.StandardTokenizer")>]
[<System.Obsolete("This type is obsolete. Please use StandardTokenizerV2 instead.")>]
type StandardTokenizer = class
    inherit Tokenizer
Public Class StandardTokenizer
Inherits Tokenizer
Héritage
StandardTokenizer
Attributs
Newtonsoft.Json.JsonObjectAttribute ObsoleteAttribute

Constructeurs

StandardTokenizer()
Obsolète.

Initialise une nouvelle instance de la classe StandardTokenizer.

StandardTokenizer(String, Nullable<Int32>)
Obsolète.

Initialise une nouvelle instance de la classe StandardTokenizer.

Propriétés

MaxTokenLength
Obsolète.

Obtient ou définit la longueur maximale du jeton. La valeur par défaut est 255. Les jetons plus longs que la longueur maximale sont fractionnés

Name
Obsolète.

Obtient ou définit le nom du générateur de jetons. Il doit contenir uniquement des lettres, des chiffres, des espaces, des tirets ou des traits de soulignement. Il doit commencer et se terminer uniquement par des caractères alphanumériques, et ne doit pas dépasser 128 caractères.

(Hérité de Tokenizer)

Méthodes

Validate()
Obsolète.

Validez l’objet .

S’applique à