Tempelkan teks untuk melihat jumlah token dan biayanya pada setiap tokenizer. Perhitungan untuk keluarga OpenAI dilakukan secara persis di peramban; sisanya ditandai sebagai estimasi dengan margin. Selisihnya paling besar pada teks Mandarin dan CJK lainnya, di mana o200k memerlukan token yang jauh lebih sedikit daripada cl100k untuk karakter yang sama.
| Tokenizer | Token | Karakter / token | Akurasi |
|---|---|---|---|
GPT-4o / GPT-5 (o200k) | 0 | — | Persis |
GPT-4 / GPT-3.5 (cl100k) | 0 | — | Persis |
Claude | 0 | — | Perkiraan ±20% |
Gemini | 0 | — | Perkiraan ±20% |
Llama 3 | 0 | — | Perkiraan ±25% |
Perhitungan persis memakai gpt-tokenizer (o200k_base / cl100k_base). Estimasi berpatokan pada hasil persis o200k dan diskalakan menurut rasio CJK, jadi bacalah sebagai perkiraan kasar, bukan angka presisi. Claude dan Gemini tidak punya tokenizer publik di sisi klien.
Biaya = token ÷ 1J × harga daftar model. “Sebagai masukan” memakai harga masukan, “sebagai keluaran” harga keluaran. Hitungan token untuk model non-OpenAI adalah perkiraan.