AI Briefing펠리컨 승부
Qwen3.6-35B-A3B on my laptop drew me a better pelican than Claude Opus 4.7
핵심 내용
Qwen3.6-35B-A3B가 로컬 노트북에서 Claude Opus 4.7보다 더 나은 펠리컨 SVG를 만들었다.
자세히 보기
펠리컨이 자전거를 타는 벤치마크에서 Qwen3.6-35B-A3B가 Claude Opus 4.7보다 더 나은 결과를 냈다. 저자는 20.9GB의 Qwen3.6-35B-A3B-UD-Q4_K_S.gguf 양자화 모델을 Unsloth가 제공한 버전으로, MacBook Pro M5에서 LM Studio와 llm-lmstudio 플러그인을 통해 실행했다.
첫 시도에서 Qwen이 그린 펠리컨은 자전거 프레임까지 안정적으로 표현한 반면, Opus 4.7은 프레임을 망가뜨렸다. Opus를 thinking_level: max로 다시 시도해도 큰 개선은 없었다.
저자는 안전장치로 "flamingo riding a unicycle" SVG도 비교했는데, 이 테스트에서도 Qwen이 더 낫다고 판단했다. 특히 Qwen 출력에 들어간 <!-- Sunglasses on flamingo! --> 같은 SVG 주석을 높이 평가했다.
다만 저자는 이 펠리컨 벤치마크가 원래는 농담에 가깝다고 강조한다. 예전에는 이 결과가 모델의 전반적 유용성과 꽤 잘 맞았지만, 이번에는 그 연결이 깨졌다고 본다. 21GB짜리 로컬 양자화 모델이 Anthropic의 최신 독점 모델보다 더 강력하다고 보기는 어렵지만, 적어도 SVG로 펠리컨이 자전거를 타는 그림을 만들고 싶다면 지금은 Qwen 쪽이 더 나은 선택이라고 결론짓는다.
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.
