AI 도구
AI 토큰·문서 분할 계산기
긴 문서의 글자·단어·UTF-8 바이트와 예상 토큰 수를 확인하고 컨텍스트 한도, 답변 여유와 겹침 범위에 맞춰 복사용 청크로 분할합니다.
상세 사용 안내
AI 토큰·문서 분할 계산기 사용방법
긴 문서의 글자·단어·UTF-8 바이트와 예상 토큰 수를 확인하고 컨텍스트 한도, 답변 여유와 겹침 범위에 맞춰 복사용 청크로 분할합니다.
3단계 사용 순서
- 1
AI에 전달할 긴 보고서·회의록·자료를 입력창에 붙여넣습니다.
- 2
사용할 모델의 전체 컨텍스트 한도와 답변용 여유, 분할 간 겹침 토큰을 입력합니다.
- 3
예상 토큰과 입력 한도 사용률을 확인한 뒤 분할 결과를 하나씩 또는 전체 복사하거나 TXT로 저장합니다.
입력 항목과 확인할 내용
AI에 전달할 긴 보고서·회의록·자료를 입력창에 붙여넣습니다.
답변용 여유는 AI가 생성할 분량을 고려해 남기고, 긴 문맥이 이어지는 자료는 분할 간 겹침을 조금 높입니다.
표시된 토큰은 문자 구성에 따른 추정치입니다. 모델별 토크나이저, 시스템 지시문과 대화 이력이 실제 한도에 포함될 수 있으므로 여유 있게 사용하세요.
8,000토큰 컨텍스트에서 답변용 1,500토큰을 남기면 각 입력 분할은 약 6,500토큰 이내가 되도록 계획됩니다.
표시된 토큰은 문자 구성에 따른 추정치입니다. 모델별 토크나이저, 시스템 지시문과 대화 이력이 실제 한도에 포함될 수 있으므로 여유 있게 사용하세요.
사용 전 주의사항
- 토큰 수는 일반적인 문자 구성에 따른 추정치이며 모델과 토크나이저에 따라 달라집니다.
- 답변용 여유 토큰을 남기고 분할 간 겹침을 주면 문맥 단절을 줄일 수 있습니다.
자주 묻는 질문
AI 토큰·문서 분할 계산기 결과는 어떻게 확인해야 하나요?+
표시된 토큰은 문자 구성에 따른 추정치입니다. 모델별 토크나이저, 시스템 지시문과 대화 이력이 실제 한도에 포함될 수 있으므로 여유 있게 사용하세요.
AI 토큰·문서 분할 계산기를 더 정확하게 사용하려면 무엇을 확인해야 하나요?+
답변용 여유는 AI가 생성할 분량을 고려해 남기고, 긴 문맥이 이어지는 자료는 분할 간 겹침을 조금 높입니다. 토큰 수는 일반적인 문자 구성에 따른 추정치이며 모델과 토크나이저에 따라 달라집니다.
입력한 내용이 서버에 전송되거나 저장되나요?+
아니요. 이 도구는 입력값을 현재 브라우저 안에서 처리하며 바로툴 서버에 원문이나 결과를 저장하지 않습니다.