TERMIUM Plus®

La banque de données terminologiques et linguistiques du gouvernement du Canada.

tokenizer [1 fiche]

Filtrer les résultats par domaine Liste alphabétique des termes

Filtrer les résultats par domaine

Liste alphabétique des termes

Fiche 1 2024-05-29

Anglais

Subject field(s)
  • Computer Processing of Language Data
  • Lexicology, Lexicography, Terminology
  • Applications of Automation
  • Artificial Intelligence
DEF

A software program that … determines boundaries for individual tokens [such as words, numbers or punctuation] in text.

Terme(s)-clé(s)
  • tokeniser

Français

Domaine(s)
  • Informatisation des données linguistiques
  • Lexicologie, lexicographie et terminologie
  • Automatisation et applications
  • Intelligence artificielle
CONT

En traitement automatique de la langue naturelle, le segmenteur réalise la segmentation d’un texte en une liste de mots, une liste de segments ou de parties de mots (ou symboles), ou encore une suite de caractères.

Espagnol

Fiche conservée

Avis de droit d’auteur pour la banque de données TERMIUM Plus®

© Services publics et Approvisionnement Canada, 2024
TERMIUM Plus®, la banque de données terminologiques et linguistiques du gouvernement du Canada
Un produit du Bureau de la traduction

Options d’affichage

Changer l'ordre d'affichage des langues officielles du Canada
Affichage des langues non officielles (l'espagnol ou le portugais)
Affichage des définitions, contextes, etc. dans les fiches

En vedette

Portail linguistique du Canada

Accédez à une collection de ressources canadiennes sur tous les aspects du français et de l'anglais, y compris des jeux.

Outils d'aide à la rédaction

Les outils d’aide à la rédaction du Portail linguistique ont fait peau neuve! Faciles à consulter, ils vous donnent accès à une foule de renseignements utiles pour mieux écrire en français et en anglais.

Lexiques et vocabulaires

Accédez aux lexiques et vocabulaires du Bureau de la traduction.

Date de modification :