Qwen3.6-35B-A3B가 Claude Opus 4.7보다 더 나은 펠리컨 이미지를 생성함

Qwen3.6-35B-A3B와 Claude Opus 4.7을 놓고 ‘자전거를 타는 펠리컨’ 이미지를 생성해 비교했더니, 로컬에서 실행한 Qwen 쪽 결과가 더 완성도 높게 나왔다.

Qwen은 Alibaba의 최신 모델을 Unsloth 20.9GB 양자화 버전으로 받아, MacBook Pro M5에서 LM Studio와 llm-lmstudio 플러그인으로 돌렸다. 반면 Claude Opus 4.7은 자전거 프레임 표현에서 오류가 있었고, thinking_level: max를 써도 개선은 거의 없었다.

검증용으로 **‘외발자전거를 타는 플라밍고’**도 시도했는데, 여기서도 Qwen이 더 나은 결과를 냈다. 작성자는 SVG 안의 <!-- Sunglasses on flamingo! --> 같은 디테일을 인상적으로 봤다.

다만 결론은 과장하지 않는다. 이 비교는 펠리컨 벤치마크라는 농담성 테스트의 연장선이며, Qwen이 전반적으로 Anthropic 최신 상용 모델보다 낫다는 뜻은 아니다. 그래도 특정 SVG 일러스트 작업이라면, 지금 시점에는 로컬에서 실행 가능한 Qwen3.6-35B-A3B가 더 실용적일 수 있다는 점을 보여준다.

HN 댓글에서는 이 결과를 두고 의견이 갈렸다.

• Qwen 결과가 더 예술적이라는 평가와, 반대로 물리적 현실성은 Opus가 더 낫다는 평가가 공존했다.
• 일부는 이 테스트가 훈련 데이터 오버피팅을 드러내는 것일 수 있다고 봤다.
• 다른 댓글들은 이런 벤치마크가 실제 일반화 성능을 보여주기 어렵고, 소형 로컬 모델과 프런티어 모델을 직접 비교하는 건 불공평하다고 지적했다.
• 그럼에도 이 사례는 로컬 LLM의 발전과 대형 상용 모델과의 격차 축소를 상징적으로 보여준다.