AI BriefingCognition, FrontierCode 2.0 공개… 최상위 모델 점수 45.5%
·2026.10.28 02:00
핵심 내용
Cognition의 FrontierCode 2.0에서 최상위 모델이 45.5% 점수를 기록했다
자세히 보기
- Cognition이 에이전틱 소프트웨어 엔지니어링 역량을 평가하는 새로운 코딩 벤치마크 FrontierCode 2.0을 공개함. 사용자 의도 추론, 명시되지 않은 제약 조건, 장기적 코드 결과에 초점을 맞춤
- 벤치마크는 포화 상태가 아니며, 최상위 모델인 Claude Opus 5.5가 45.5%를 기록함. GPT-6 Astra는 42.8%, Grok 4.7은 28.6%를 기록함
- FrontierCode 2.0 과제는 FrontierCode 1.1보다 훨씬 크고 복잡함. 25% 더 큰 코드베이스에서 참조 솔루션은 67% 더 많은 파일과 89% 더 많은 코드 라인을 수정함
- 벤치마크는 'thoroughness' 기준에 중점을 두며, 이는 이전 버전 대비 3배 증가함. 모델이 명시된 프롬프트만 처리하는 것이 아니라 버그의 모든 인스턴스를 수정하고 기존 지원 패턴과 일치하는지 테스트함
- 더 높은 추론 노력이 항상 점수 향상을 보장하지 않음. 모델은 최대 노력 시 불필요한 변경이나 공개 API 파괴로 인해 범위 기준을 충족하지 못함. 예를 들어 PostHog SDK에서 레이스 컨디션 수정을 위해 공개 API 파일을 삭제하는 경우 등
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.
관련 추천
잭 클락, GPT-6-Astra 98% 점수 근거로 AI 특이점 도래 주장