Token-Zähler · über Tokenizer
Text einfügen, um Tokenzahl und Kosten unter jedem Tokenizer zu sehen. Werte der OpenAI-Familie werden im Browser exakt berechnet; die übrigen sind als Schätzung mit Fehlerspanne gekennzeichnet. Am größten ist der Unterschied bei chinesischem und anderem CJK-Text, wo o200k für dieselben Zeichen deutlich weniger Token benötigt als cl100k.
Tokens über Tokenizer hinweg
| Tokenizer | Tokens | Zeichen / Token | Genauigkeit |
|---|---|---|---|
GPT-4o / GPT-5 (o200k) | 0 | — | Exakt |
GPT-4 / GPT-3.5 (cl100k) | 0 | — | Exakt |
Claude | 0 | — | Schätzung ±20% |
Gemini | 0 | — | Schätzung ±20% |
Llama 3 | 0 | — | Schätzung ±25% |
Exakte Werte nutzen gpt-tokenizer (o200k_base / cl100k_base). Schätzungen stützen sich auf den exakten o200k-Wert und skalieren nach CJK-Anteil, sind also Größenordnungen und keine genauen Werte. Für Claude und Gemini gibt es keinen öffentlichen Tokenizer im Browser.
Kosten für diesen Text, nach Modell
Kosten = Tokens ÷ 1M × Listenpreis des Modells. „Als Eingabe“ nutzt den Eingabepreis, „als Ausgabe“ den Ausgabepreis. Token-Zählungen für Nicht-OpenAI-Modelle sind Schätzungen.