Aller au contenu

TechniqueGlossaire de l'IA

Token

La plus petite unité de texte qu'un modèle manipule, souvent un morceau de mot. « Incroyable » peut faire 2-3 tokens. Les prix des API se comptent en tokens.

Autrement dit

Les LEGO du langage : le modèle assemble des briques, pas des mots entiers.

Nos articles qui en parlent

Pour aller plus loin à l'Académie

Voir aussi

Dans la même famille : Technique

Retrouver ce terme dans le glossaire complet →Tous les termes