GPT-6 Astra, SlopCodeBench 10월 평가서 엄격 통과율 1위

·2026.10.16 04:09

핵심 내용

GPT-6 Astra가 SlopCodeBench에서 16.3%의 최고 엄격 통과율을 기록하며 1위를 차지했다.

1 / 6

GPT-6 Astra XHigh가 16.33%(196개 체크포인트 중 32개)의 엄격 통과율로 1위 기록함, GPT-6 SOL Medium(15.31%)을 근소하게 앞섬
XHigh 등 높은 노력 설정이 엄격 통과율을 안정적으로 개선하지 못함, Opus 5.5와 GPT-6 SOL은 Medium 대비 XHigh에서 성능 저하 및 2.11~4.22배 비용 증가 확인됨
최종 코드 품질은 여전히 낮음, 모델별 최종 체크포인트에서 1,435~2,831개 테스트 케이스 실패로 심각한 회귀 문제 존재함
Opus 5.5 XHigh가 가장 적은 엄격 통과 수에도 불구하고 가장 낮은 슬랍 커버리지(77.75%)로 가장 깔끔한 코드 생성함

이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.

AI 처리 방식을 확인하거나, 요약 오류와 출처 표기 문제, 삭제 요청을 문의 · 건의로 알려주세요.