← 도구(으)로 돌아가기

토큰 계산 · 토크나이저 교차

텍스트를 붙여 넣으면 각 토크나이저에서의 토큰 수와 비용을 보여줍니다. OpenAI 계열은 브라우저에서 정확히 계산하고, 나머지는 오차 범위를 붙인 추정값으로 표시합니다. 차이가 가장 큰 것은 중국어 등 CJK 텍스트로, 같은 문자에 대해 o200k가 cl100k보다 눈에 띄게 적은 토큰을 사용합니다.

0자

토크나이저별 토큰 수

토크나이저토큰 수문자 / 토큰
GPT-4o / GPT-5 (o200k)
0
GPT-4 / GPT-3.5 (cl100k)
0
Claude
0
Gemini
0
Llama 3
0

정확한 값은 gpt-tokenizer(o200k_base / cl100k_base)로 계산합니다. 추정값은 정확한 o200k 값을 기준으로 CJK 비율에 따라 조정한 것이므로, 정밀한 값이 아니라 개략적인 규모로 보시면 됩니다. Claude와 Gemini는 클라이언트에서 쓸 수 있는 공개 토크나이저가 없습니다.

이 텍스트의 모델별 비용

비용 = 토큰 ÷ 100만 × 모델 정가. 「입력으로」는 입력 가격을, 「출력으로」는 출력 가격을 사용합니다. OpenAI 이외 모델의 토큰 수는 추정치입니다.