Comprendre • manipuler • mémoriser

Les tokens, enfin visibles.

Découpe du texte, poids des fichiers, contexte qui se remplit : manipule les paramètres et regarde ce qui se passe. Ici, on apprend en provoquant les effets soi-même.

WordPresshébergement<div>https://
1 mot
≠
1 token
≈ 4 car.par token, règle de poche
3 formats3 poids différents
1 contextequi grossit au fil du chat
Expérience 01

Un token est un fragment

Écris quelque chose. Le simulateur découpe le texte de manière pédagogique pour rendre visible le principe de tokenisation.

Ton texte

Teste ce que tu veux

Important : ce découpage est une simulation visuelle. Chaque modèle utilise son propre tokenizer ; le nombre exact varie selon le modèle et la langue.
0tokens estimés
0caractères
0caractères / token
À retenir : mots rares, chaînes techniques, URLs, code et balisage ont tendance à se fragmenter davantage que du texte courant.
Expérience 02

Même contenu, poids différent

Le format ajoute sa propre surcharge. Manipule la longueur du document et compare Markdown, HTML et PDF.

Markdown .md

Texte presque nu

0 tk

Très peu de surcharge : titres, listes et quelques marqueurs simples.

HTML .html

Balisage + attributs

0 tk

Balises, classes, attributs et styles s’ajoutent au texte utile.

PDF .pdf

Texte + rendu visuel

0 tk

Cas pédagogique : le traitement visuel peut ajouter un coût important lorsqu’une page doit être interprétée comme image.

Les valeurs sont volontairement approximatives. Le but est d’illustrer les écarts de structure et de traitement, pas une facturation exacte.
Expérience 03

Le contexte se remplit

Ajoute des messages et des documents. Chaque nouveau tour doit tenir compte d’un contexte de plus en plus volumineux.

3 000 tkcontexte actuel
0 tktotal relu depuis le début
instructionsdocumentsmessages
2%Contexte très léger
Un gros document ajouté tôt reste présent dans le contexte et pèse sur les tours suivants.
Réflexes à retenir

4 bonnes pratiques

Des règles simples pour limiter la consommation inutile et garder un contexte propre.

1
Donne le bon format

Texte ou Markdown quand le contenu visuel n’est pas nécessaire.

2
Charge seulement l’utile

Évite d’envoyer 200 pages si 8 pages suffisent pour la tâche.

3
Nettoie le contexte

Quand le sujet change vraiment, une nouvelle conversation peut être plus propre.

4
Résume les étapes

Pour les travaux longs, conserve les décisions utiles plutôt que tout l’historique brut.

Défi final

Token Battle

5 situations. Ton score montre si tu as acquis les bons réflexes.

Question 1 / 50 XP
Série : 0