Tokenizzatore IA
Scopri come il testo viene suddiviso in token dai diversi modelli LLM. Tokenizzazione esatta per i modelli OpenAI, stime per gli altri.
Testo di input
openaio200k_base · tokenizzazione esatta
Righe: 0Caratteri: 0Parole: 0
Token
Inserisci il testo a sinistra per vedere la visualizzazione dei token