추천
GPT-6 Astra, MultiLangBench 87.4% 달성하며 GPT-5.6 Sol 추월
·2026.10.19 21:00
핵심 내용
GPT-6 Astra가 MultiLangBench에서 87.4% 달성하며 GPT-5.6 Sol을 능가했다
자세히 보기
- GPT-6 Astra가 MultiLangBench에서 20개 프로그래밍 언어 평균 테스트 통과율 87.4% 기록함 (GPT-5.6 Sol 대비 26.8%에서 상승)
- GPT-6.1 Sol이 고 추론 노력(high reasoning effort) 설정에서 COBOL 마이그레이션 평가 정확도 97.9% 달성함
- 저 추론 노력(low reasoning effort) 설정에서는 GPT-5.6 Sol API 비용의 61% 수준으로 정확도 86.6% 기록함
- MultiLangBench는 COBOL, Fortran, Visual Basic 등 20개 언어로 SQLite 호환 데이터베이스 엔진을 처음부터 구축하는 능력을 평가함
- COBOL 마이그레이션 평가는 C++, Java, Kotlin, Python, Rust로 프로그램을 옮기며 바이트 단위 동작 일치(byte-for-byte behavior parity)를 유지하는지 검증함
- GPT-6 Luna는 샘플당 약 $0.77의 API 비용으로 MultiLangBench 40.3% 기록하며 GPT-5.6 Sol 대비 약 78% 비용 절감 효과 제공함
- MultiLangBench 평가 설정 및 테스트 스위트가 GitHub에 공개되어 개발자가 특정 언어별 성능 및 격차를 확인 가능함
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.