83k→3.7k 압축
83k tokens to 3.7k. Semantic knowledge base for Claude Code, inspired by Karpathy's wiki
·2026.04.10 10:50
핵심 내용
Claude Code용 의미 지식베이스로 코드 이해 비용을 83k 토큰에서 3.7k로 줄였다.
자세히 보기
코드베이스의 도메인 용어와 행동 유사성을 따로 인덱싱해, 검색보다 한 단계 위의 질문을 답하게 만든다.
- "이 코드베이스에서 dependency가 무슨 뜻인지" 같은 질문을 문자열 검색이 아니라 개념 수준으로 처리한다.
- "authenticate()와 비슷하게 동작하는 함수"를 임베딩 유사도로 찾는다.
- 이름 일관성, 용어 변화, 중복 검증 로직도 잡아낸다.
작성자는 FastAPI, PyTorch, voxelmorph, ScribblePrompt에서 시험했고, Python/TS/JS/Rust를 지원한다고 밝혔다.
구현은 tree-sitter + TF-IDF + 2개의 임베딩 모델 + PageRank 조합이며, 로컬 실행만으로 동작해 API 키가 필요 없다.
Claude Code 기준 예시에서는 같은 질문에 대해 27개 툴 호출, 83k 토큰, 3분이 들던 작업이 4개 호출, 3.7k 토큰, 5초로 줄었다고 주장한다.
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.