Tokeniseur IA
Découvrez comment le texte est découpé en tokens par différents modèles LLM. Tokenisation exacte pour les modèles OpenAI, estimations pour les autres.
Texte d'entrée
openaio200k_base · tokenisation exacte
Lignes: 0Caractères: 0Mots: 0
Tokens
Saisissez du texte à gauche pour voir la visualisation des tokens