Claude 메시지 스레드, 50만~100만 토큰 요청 TTFT 35% 단축
·2026.11.02 09:00
핵심 내용
Claude 메시지 스레드가 50만~100만 토큰 요청의 중간 TTFT를 35% 줄였다
자세히 보기
- Claude Platform에서 메시지 스레드(message threads) 공개 베타 제공, 이전 턴 이후의 새 메시지만 전송하여 전체 대화 히스토리를 재전송하지 않음
- 50만~100만 토큰 요청 시 메시지 스레드 활성화로 중간값 첫 토큰 시간(TTFT) 약 35% 감소
- 스레드는 암호화 메모리에 저장되며 마지막 요청 후 5분 만료, Claude가 매 턴마다 전체 대화를 읽으므로 토큰 사용량은 변동 없음
- 지연 시간이 주요 고려 사항인 장기 실행 코딩 에이전트, 컴퓨터 사용 에이전트, 문서 또는 이미지 중심 워크플로에 적합
- 네이티브 Claude Platform, AWS 기반 Claude Platform, Microsoft Foundry 내 Claude, Google Cloud 내 Claude Models(Anthropic 관리)에서 표준 토큰 요금 및 기존 레이트 리밋 적용
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.