Compteur de Tokens

Comptez les tokens pour GPT-4o, GPT-4, Claude et d'autres modèles LLM instantanément.

...
GPT-4o Tokens
GPT-4o, GPT-4o-mini
...
GPT-4 Tokens
GPT-4, GPT-4-turbo, GPT-3.5-turbo
...
Claude Tokens
Claude 4, Claude 3.5, Claude 3(approx.)
0
Caractères
0
Mots

Fonctionnalités

Support Multi-Modèles

Comptez les tokens pour GPT-4o, GPT-4, GPT-3.5-turbo et les modèles Claude simultanément.

Comptage en Temps Réel

Les comptes de tokens se mettent à jour instantanément pendant que vous tapez ou collez du texte.

Tokenisation Précise

Utilise le tokeniseur BPE officiel (tiktoken) pour des comptes précis de tokens GPT.

Confidentialité d'Abord

Tout le traitement se fait dans votre navigateur. Votre texte n'est jamais envoyé à aucun serveur.

Questions Fréquentes

Qu'est-ce qu'un token dans le contexte des LLMs ?

Un token est un morceau de texte que les modèles de langage traitent. Les tokens peuvent être des mots, des parties de mots ou même des caractères individuels. Par exemple, le mot 'hamburger' pourrait être divisé en 'ham', 'bur', 'ger' — trois tokens. En moyenne, un token correspond à environ 4 caractères ou 0,75 mot en anglais.

Pourquoi différents modèles ont-ils des comptes de tokens différents ?

Différents modèles utilisent différents tokeniseurs (schémas d'encodage). GPT-4o utilise o200k_base avec un vocabulaire de 200 000 tokens, tandis que GPT-4 et GPT-3.5 utilisent cl100k_base avec 100 000 tokens. Un vocabulaire plus grand signifie que les mots courants sont plus susceptibles d'être des tokens uniques.

Quelle est la précision des comptes de tokens Claude ?

Les comptes de tokens Claude affichés ici sont des estimations approximatives basées sur le tokeniseur cl100k_base. Bien que Claude utilise son propre tokeniseur propriétaire, les comptes sont généralement très proches des valeurs réelles.

Comment utiliser les comptes de tokens pour optimiser mes prompts ?

Connaître votre compte de tokens vous aide à rester dans les limites de contexte du modèle (ex. 128K pour GPT-4o, 200K pour Claude 3.5), estimer les coûts API et optimiser les prompts en supprimant le texte inutile.

À Propos du Compteur de Tokens

Notre compteur de tokens gratuit en ligne aide les développeurs, ingénieurs de prompts et passionnés d'IA à compter précisément les tokens pour les modèles de langage populaires. Que vous construisiez des applications avec l'API OpenAI ou l'API Claude d'Anthropic, connaître votre compte de tokens est essentiel.

L'outil utilise les algorithmes officiels du tokeniseur BPE pour fournir des comptes précis pour les modèles GPT. Pour les modèles Claude, nous fournissons des approximations proches. Les comptes sont calculés en temps réel et supportent le texte dans n'importe quelle langue.

Toute la tokenisation se fait dans votre navigateur en JavaScript — votre texte n'est jamais envoyé à aucun serveur. Cela le rend sûr pour les prompts confidentiels et le contenu sensible. Aucune inscription requise.