Aller au contenu
Lioncore

Outils

Compteur de tokens

Collez un texte et voyez exactement où tombent les coupures, token par token, avec les identifiants. Les vocabulaires o200k, cl100k, p50k et r50k tournent dans votre navigateur et donnent un compte exact pour les modèles OpenAI. Anthropic ne publie pas de tokenizer local : pour Claude, l'outil affiche une approximation et le dit clairement.

Tokenizer

OpenAI

Meta Llama

Le reste

GPT-4o, GPT-4.1, GPT-5.x et la série o.

Un vocabulaire se télécharge une seule fois, au premier clic, puis reste en mémoire pour la session.

Tokens

0

exact

Caractères

352

Mots

60

Caractères / token

-

358 octets UTF-8

Découpage

Le vocabulaire tourne dans votre navigateur et votre texte n'en sort jamais.