Choisissez le vocabulaire dans lequel chercher

Langue des données

Concept information

Terme préférentiel

tokenisation  

Définition

  • turning a sequence of characters (a text) into a sequence of occurrences of inflected word forms and interpunction symbols (often called 'tokens')

Concept générique

URI

https://vocabs.sshopencloud.eu/vocabularies/csd-tool-tasks/0102

Télécharger ce concept :

RDF/XML TURTLE JSON-LD Dernière modification le 02/01/2024