tokenize

Anglais

Étymologie

Dérivé de token, avec le suffixe -ize.

Verbe

Temps Forme
Infinitif to tokenize
\toʊ.kə.naɪz\
Présent simple,
3e pers. sing.		 tokenizes
\toʊ.kə.naɪz.ɪz\
Prétérit tokenized
\toʊ.kə.naɪzd\
Participe passé tokenized
\toʊ.kə.naɪzd\
Participe présent tokenizing
\toʊ.kə.naɪz.ɪŋ\
voir conjugaison anglaise

tokenize

  1. (Informatique) Parser un texte composé de tokens.
    • Tokenizing is the process of converting a string into a list of substrings, known as tokens. — (Ben Stephenson, The Python Workbook (2nde édition), Springer, 2019, p. 90)
      La traduction en français de l’exemple manque. (Ajouter)

Variantes

Apparentés étymologiques

Références

Cet article est issu de Wiktionnaire. Sauf mention contraire, le texte est disponible sous Creative Commons Attribution-Share Alike 4.0. Des conditions supplémentaires peuvent s’appliquer aux fichiers multimédias.