Agenfy

Définition

Token

Aussi appelé : Jeton

Un token est l'unité de texte qu'un LLM lit et produit : un mot entier, un fragment de mot, un signe de ponctuation ou un espace. Les modèles mesurent leur fenêtre de contexte et leurs éditeurs facturent l'usage des API en tokens. Le découpage dépend du modèle ; en français, un mot correspond souvent à plus d'un token.

Pourquoi c'est important en entreprise

Le token est l'unité de coût et de performance d'un projet IA : prix par volume de tokens en entrée et en sortie, limite de contexte, temps de génération. Comprendre ce découpage permet d'estimer un budget et d'optimiser un assistant (prompts plus courts, passages mieux sélectionnés).

Exemple concret

Pour estimer le coût mensuel d'un assistant, on multiplie le nombre de requêtes attendu par le nombre moyen de tokens par requête (instructions, documents fournis, réponse), puis par le tarif en vigueur publié par l'éditeur du modèle.

À ne pas confondre avec

Jeton d'authentification
Une clé ou un « token » d'API sert à s'authentifier auprès d'un service ; rien à voir avec l'unité de texte.
Embedding
Un embedding représente le sens d'un contenu ; le token n'est qu'une unité de découpage.

Termes liés

Notre accompagnement

Audit & stratégie IA

Savoir où l'IA crée de la valeur chez vous, et par où commencer

Découvrir l'offre

Définition mise à jour le . Voir tout le glossaire