Inicio > Term: tokenizer
tokenizer
A text segmentation program that scans text and determines if and when a series of characters can be recognized as a token.
- Parte del discurso: noun
- Industria/ámbito: Software
- Categoría: Servicios de globalización de software
- Company: IBM
0
Creador
- Peteh
- 100% positive feedback