WhiteSpace Třída
Definice
Důležité
Některé informace platí pro předběžně vydaný produkt, který se může zásadně změnit, než ho výrobce nebo autor vydá. Microsoft neposkytuje žádné záruky, výslovné ani předpokládané, týkající se zde uváděných informací.
Pre-tokenizer, který rozděluje text na hranici slova. Slovo je sada znaků abecedy, čísel a podtržítka.
public sealed class WhiteSpace : Microsoft.ML.Tokenizers.PreTokenizertype WhiteSpace = class
inherit PreTokenizerPublic NotInheritable Class WhiteSpace
Inherits PreTokenizer- Dědičnost
Konstruktory
| WhiteSpace() |
Pre-tokenizer, který rozděluje text na hranici slova. Slovo je sada znaků abecedy, čísel a podtržítka. |
Pole
| Instance |
Získá jednu instanci whitespace pre-tokenizer.. |
Metody
| PreTokenize(String) |
Rozdělí daný řetězec na více podřetězců na hranici slova a sleduje posuny uvedených podřetězců od původního řetězce. |