Aller au contenu
Chroniques
Menu

français

tokéniser

Découper automatiquement un texte en unités lexicales grâce à une analyse lexicale.

Donnée du Wiktionnaire, non revue

Ascendance

Reconstituée depuis les relations enregistrées, sans reformuler le texte du Wiktionnaire

tokéniserfrançaistokenizeanglais,tokenanglaisSymbole, signe.,tācenvieil anglais,

lien vérifiéconfirmé par deux sources indépendantesune seule sourcelu automatiquement dans le Wiktionnaire, non vérifié
L’ascendance en liste
  • tokenize « Parser un texte composé de tokens. » (anglais) → tokéniser (français) : emprunté ; lu automatiquement dans le Wiktionnaire, non vérifié
  • token « Symbole, signe. » (anglais) → tokenize (anglais) : formé ; une seule source
  • tācen (vieil anglais) → token (anglais) : hérité ; une seule source
  • anglais tokenize — lu automatiquement dans le Wiktionnaire, non vérifié

Le Wiktionnaire

Texte de l’article du Wiktionnaire, cité tel quel

Francisation du verbe anglais tokenize.

Wiktionnaire, article « tokéniser » — CC BY-SA

Définitions

  1. 2 Associer un jeton NFT dans une blockchain à un bien réel.
  2. 3 Utiliser le discours des personnes issues des minorités sociales dominées comme caution

Descendance

Mots formés à partir de tokéniser

  • retokéniserfrançaisDécouper à nouveau un texte en unités lexicales grâce à une analyse lexicale.

Sources

Chercher dans : TLFi · FEW · Académie française (nouvel onglet) (Source : www.dictionnaire-academie.fr)