한국어 AI 토큰 계산기 — 붙여 넣으면 정확히 세어 드립니다

글을 붙여 넣으면 토큰 수를 정확히 세어 드립니다. 추정이 아니라 실제 토크나이저로 계산합니다.

어떻게 계산하나

• 인코딩은 o200k_base(GPT-4o 이후 계열)입니다.
• 브라우저에서 gpt-tokenizer 라이브러리를 불러 실제로 토큰화합니다.
• 같은 문장 16개를 파이썬 tiktoken 0.14.0과 대조해 16개 전부 일치하는 것을 확인하고 채택했습니다(2026년 10월 12일).
• 입력한 글은 서버로 전송되지 않습니다. 계산은 전부 브라우저 안에서 끝납니다.

라이브러리가 로드되기 전 잠깐은 저희가 직접 만든 추정식으로 보여줍니다. 그 추정식의 검증 오차는 평균 13.5%이고, 로드가 끝나면 정확값으로 바뀝니다. 화면 위 배지에 지금 어느 쪽인지 표시됩니다.

왜 글자 수로는 안 되나

한국어는 글자당 토큰이 0.5~0.7 사이에서 글의 성격에 따라 크게 흔들립니다. 영문은 0.2 근처, 이모지는 1을 넘습니다. 그래서 “글자 수 × 몇” 식으로는 맞지 않습니다.

실제로 저희가 단일 계수와 종류별 계수를 각각 적합해 비교해 봤는데, 처음 보는 문서에서 단일 계수는 평균 32.6%, 종류별+경계 보정은 13.5% 틀렸습니다. 추정식으로는 이 정도가 한계라서, 정확한 값이 필요하면 토크나이저를 직접 돌리는 수밖에 없습니다.

같이 보면 좋은 측정

• 한국어는 영어보다 토큰을 얼마나 더 쓸까 — 직접 측정한 결과
• 내 문서가 AI에 들어갈까 — 한국어 문서 종류별 토큰 기준표
• AI 대화가 길어지면 비용이 25배 — 누적 토큰 실측
• AI에 표 데이터 넣을 때 — CSV·JSON·마크다운 중 뭐가 제일 쌀까
• 한국어 AI 토큰 비용 종합 참고표 — 실측 수치 한 페이지 정리

도구 공개일: 2026년 10월 12일 / 인코딩 o200k_base / 검증: tiktoken 0.14.0과 16건 전수 일치