토큰 고정 폭 폰트 생성하는 오픈소스 컴파일러 공개
·2026.09.26 09:30
핵심 내용
각 토큰이 고정 폭을 차지하는 오픈소스 폰트 컴파일러가 DeepSeek 등 다양한 프리셋을 지원하며 공개됐다.
자세히 보기
토큰 공간 폰트 컴파일러 공개
오픈소스 토큰 공간 폰트 컴파일러(Tokenizer-Space Font Compiler)가 공개됐다. 이 도구는 토크나이저별 셰이핑 규칙을 적용해 각 토큰이 고정된 3em 폭을 차지하도록 폰트를 컴파일한다.
지원 프리셋
- DeepSeek V4.1 Flash
- ctok v3/v4.7/v4.8 (비공식 Claude 근사치)
- 표준 토크나이저: o200k_base, cl100k_base, p50k_base, r50k_base
실험적 프리셋 Kimi K3, GLM-5.3, Llama 3, Trinity Large Thinking, Laguna M.1, Qwen 3.6, Gemma 4, Gemini 3.5 Flash 등이 포함된다.
연동 및 한계 Discord(Vesktop)와 Slack 연동 가이드를 제공한다. 다만 정확한 과금 계산기는 아니다. 감사 결과 DeepSeek 2,984건 중 59건의 ID 불일치, ctok v4.8 2,984건 중 16건의 카운트/폭 불일치가 발견됐다.
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.