TokenizerType Enumeración
Definición
Importante
Parte de la información hace referencia a la versión preliminar del producto, que puede haberse modificado sustancialmente antes de lanzar la versión definitiva. Microsoft no otorga ninguna garantía, explícita o implícita, con respecto a la información proporcionada aquí.
public enum TokenizerType
type TokenizerType =
- Herencia
-
TokenizerType
Campos
| Nombre | Valor | Description |
|---|---|---|
| None | 0 | Este valor indica que no se debe extraer ningún token de esta propiedad. Solo es válido para tokenizer_type ser "NONE" si getIndexingType() es INDEXING_TYPE_NONE. Las partes de esta página son modificaciones basadas en el trabajo creado y compartido por el Android y se usan según los términos descritos en creative Creative Commons 2.5 Attribution License. |
| Plain | 1 | Tokenización para texto sin formato. Este valor indica que los tokens se deben extraer de esta propiedad en función de los saltos de palabra. Los segmentos de espacios en blanco y puntuación no se consideran tokens. Por ejemplo, una propiedad con "foo bar. baz." generará tokens para "foo", "bar" y "baz". Los segmentos " " y "." no se considerarán tokens. Solo es válido para tokenizer_type ser "PLAIN" si getIndexingType() es INDEXING_TYPE_EXACT_TERMS o INDEXING_TYPE_PREFIXES. Las partes de esta página son modificaciones basadas en el trabajo creado y compartido por el Android y se usan según los términos descritos en creative Creative Commons 2.5 Attribution License. |
| Verbatim | 2 | Este valor indica que no se debe aplicar ninguna normalización o segmentación a los valores de cadena que se tokenizan mediante este tipo. Por lo tanto, el token de salida es equivalente al valor de cadena sin formato. Por ejemplo, una propiedad con "Hello, world!" generará el token "Hello, world!", conservando la puntuación y la mayúscula, y no creando tokens independientes entre el espacio. Solo es válido para tokenizer_type ser "VERBATIM" si getIndexingType() es INDEXING_TYPE_EXACT_TERMS o INDEXING_TYPE_PREFIXES. Las partes de esta página son modificaciones basadas en el trabajo creado y compartido por el Android y se usan según los términos descritos en creative Creative Commons 2.5 Attribution License. |
| Rfc822 | 3 | Tokenización para correos electrónicos. Este valor indica que los tokens se deben extraer de esta propiedad en función de la estructura de correo electrónico. Por ejemplo, una propiedad con "alex.sav@google.com" generará tokens para "alex", "sav", "alex.sav", "google", "com" y "alexsav@google.com" Solo es válido para que tokenizer_type sea "RFC822" si getIndexingType() es INDEXING_TYPE_EXACT_TERMS o INDEXING_TYPE_PREFIXES. Las partes de esta página son modificaciones basadas en el trabajo creado y compartido por el Android y se usan según los términos descritos en creative Creative Commons 2.5 Attribution License. |