TOK

AI 도구

AI 토큰·문서 분할 계산기

긴 문서의 글자·단어·UTF-8 바이트와 예상 토큰 수를 확인하고 컨텍스트 한도, 답변 여유와 겹침 범위에 맞춰 복사용 청크로 분할합니다.

모델 컨텍스트 범위AI 답변에 필요한 공간을 남기고 입력 문서를 나눕니다.
공백 포함 글자72
단어18
UTF-8176bytes
예상 토큰82추정치
입력 한도 사용1%6,500 max
문서 분할 결과1
문서 분할 결과 (1개)
분할 1약 82토큰

상세 사용 안내

AI 토큰·문서 분할 계산기 사용방법

이럴 때 사용하세요

긴 문서의 글자·단어·UTF-8 바이트와 예상 토큰 수를 확인하고 컨텍스트 한도, 답변 여유와 겹침 범위에 맞춰 복사용 청크로 분할합니다.

01

3단계 사용 순서

  1. 1

    AI에 전달할 긴 보고서·회의록·자료를 입력창에 붙여넣습니다.

  2. 2

    사용할 모델의 전체 컨텍스트 한도와 답변용 여유, 분할 간 겹침 토큰을 입력합니다.

  3. 3

    예상 토큰과 입력 한도 사용률을 확인한 뒤 분할 결과를 하나씩 또는 전체 복사하거나 TXT로 저장합니다.

02

입력 항목과 확인할 내용

핵심 입력문서·컨텍스트 한도

AI에 전달할 긴 보고서·회의록·자료를 입력창에 붙여넣습니다.

설정과 선택 항목조건에 맞게 설정

답변용 여유는 AI가 생성할 분량을 고려해 남기고, 긴 문맥이 이어지는 자료는 분할 간 겹침을 조금 높입니다.

확인할 결과예상 토큰·문서 분할

표시된 토큰은 문자 구성에 따른 추정치입니다. 모델별 토크나이저, 시스템 지시문과 대화 이력이 실제 한도에 포함될 수 있으므로 여유 있게 사용하세요.

03
실제 사용 예시

8,000토큰 컨텍스트에서 답변용 1,500토큰을 남기면 각 입력 분할은 약 6,500토큰 이내가 되도록 계획됩니다.

04
결과 확인 방법

표시된 토큰은 문자 구성에 따른 추정치입니다. 모델별 토크나이저, 시스템 지시문과 대화 이력이 실제 한도에 포함될 수 있으므로 여유 있게 사용하세요.

05

사용 전 주의사항

  • 토큰 수는 일반적인 문자 구성에 따른 추정치이며 모델과 토크나이저에 따라 달라집니다.
  • 답변용 여유 토큰을 남기고 분할 간 겹침을 주면 문맥 단절을 줄일 수 있습니다.
06

자주 묻는 질문

AI 토큰·문서 분할 계산기 결과는 어떻게 확인해야 하나요?+

표시된 토큰은 문자 구성에 따른 추정치입니다. 모델별 토크나이저, 시스템 지시문과 대화 이력이 실제 한도에 포함될 수 있으므로 여유 있게 사용하세요.

AI 토큰·문서 분할 계산기를 더 정확하게 사용하려면 무엇을 확인해야 하나요?+

답변용 여유는 AI가 생성할 분량을 고려해 남기고, 긴 문맥이 이어지는 자료는 분할 간 겹침을 조금 높입니다. 토큰 수는 일반적인 문자 구성에 따른 추정치이며 모델과 토크나이저에 따라 달라집니다.

입력한 내용이 서버에 전송되거나 저장되나요?+

아니요. 이 도구는 입력값을 현재 브라우저 안에서 처리하며 바로툴 서버에 원문이나 결과를 저장하지 않습니다.