← 返回工具
Token 计算 · 跨分词器
粘贴一段文本,查看它在各分词器下的 token 数与对应成本。OpenAI 系在浏览器内精确计算,其余标为估算并给出误差范围。差距在中文等 CJK 文本上最明显:同样的字,o200k 用到的 token 数明显少于 cl100k。
0 个字符
各分词器下的 token 数
| 分词器 | Token 数 | 字符 / token | 精度 |
|---|---|---|---|
GPT-4o / GPT-5(o200k) | 0 | — | 精确 |
GPT-4 / GPT-3.5(cl100k) | 0 | — | 精确 |
Claude | 0 | — | 估算 ±20% |
Gemini | 0 | — | 估算 ±20% |
Llama 3 | 0 | — | 估算 ±25% |
精确值用 gpt-tokenizer(o200k_base / cl100k_base)。估算以精确的 o200k 数为锚、按 CJK 占比缩放,只作量级参考而非精确值。Claude、Gemini 没有公开的客户端分词器。
这段文本按模型算钱
成本 = tokens ÷ 100 万 × 该模型牌价。「作为输入」用输入价,「作为输出」用输出价。非 OpenAI 模型的 token 数为估算。