Tokenizer Classe

Referência

Definição

Namespace:: Microsoft.Bot.Builder.Dialogs.Choices

Assembly:: Microsoft.Bot.Builder.Dialogs.dll

Pacote:: Microsoft.Bot.Builder.Dialogs v4.22.7

Importante

Algumas informações se referem a produtos de pré-lançamento que podem ser substancialmente modificados antes do lançamento. A Microsoft não oferece garantias, expressas ou implícitas, das informações aqui fornecidas.

Fornece uma implementação padrão do criador de tokens.

public class Tokenizer

type Tokenizer = class

Public Class Tokenizer

Herança: Object
Tokenizer

Construtores

Tokenizer()

Fornece uma implementação padrão do criador de tokens.

Propriedades

DefaultTokenizer

Obtém a implementação padrão TokenizerFunction .

Métodos

DefaultTokenizerImpl(String, String)

Tokenizer simples que quebra em espaços e pontuação. A única normalização feita é em minúsculas.

Aplica-se a

Compartilhar via