Opus 4.7은 게으르다

OpenRouter에서 reasoning high, max_tokens 100k 설정으로 Qwen 3.6, Opus 4.6, Opus 4.7를 같은 펠리컨-자전거 SVG 프롬프트에 넣어 비교했다.

• 기본 프롬프트에서는 Opus 4.7이 가장 짧은 출력을 냈고, 토큰 사용량도 20 토큰 수준으로 가장 적었다.
• think hard 프롬프트를 붙여도 4.7은 95 토큰 수준이었고, 4.6과 Qwen은 각각 약 500 토큰을 사용했다.
• 구조화된 지시와 viewBox="0 0 1200 1200" 조건을 추가하자 세 모델 모두 그럴듯한 SVG를 만들었지만, 4.7은 여전히 가장 작은 결과를 냈다.
• 총비용은 Qwen 3.6 $0.0653 / 40.7KB, Opus 4.6 $4.0250 / 34.5KB, Opus 4.7 $0.6447 / 22.6KB였다.

4.7은 4.6보다 훨씬 저렴하고 결과도 작았지만, 실험은 한 번씩만 실행한 SVG 생성 벤치마크라 일반화에는 한계가 있다.