ClassicTokenizer interface

Paket:

@azure/search-documents

Çoğu Avrupa dili belgesini işlemek için uygun olan dil bilgisi tabanlı belirteç oluşturucu. Bu belirteç oluşturucu Apache Lucene kullanılarak uygulanır.

Extends

BaseLexicalTokenizer

Özellikler

maxTokenLength	En fazla belirteç uzunluğu. Varsayılan değer 255'tir. Uzunluk üst sınırından uzun olan belirteçler bölünür. Kullanılabilecek en fazla belirteç uzunluğu 300 karakterdir.
odatatype	Belirteç oluşturucu türünü belirten bir URI parçası.

Devralınan Özellikler

name	Belirteç oluşturucunun adı. Yalnızca harf, basamak, boşluk, tire veya alt çizgi içermelidir, yalnızca alfasayısal karakterlerle başlayıp bitebilir ve 128 karakterle sınırlıdır.

Özellik Ayrıntıları

maxTokenLength

En fazla belirteç uzunluğu. Varsayılan değer 255'tir. Uzunluk üst sınırından uzun olan belirteçler bölünür. Kullanılabilecek en fazla belirteç uzunluğu 300 karakterdir.

maxTokenLength?: number

Özellik Değeri

number

odatatype

Belirteç oluşturucu türünü belirten bir URI parçası.

odatatype: "#Microsoft.Azure.Search.ClassicTokenizer"

Özellik Değeri

"#Microsoft.Azure.Search.ClassicTokenizer"

Devralınan Özellik Detayları

name

Belirteç oluşturucunun adı. Yalnızca harf, basamak, boşluk, tire veya alt çizgi içermelidir, yalnızca alfasayısal karakterlerle başlayıp bitebilir ve 128 karakterle sınırlıdır.

name: string

Özellik Değeri

string

LexicalTokenizer.name'den devralındı