추천

GPT-6 Astra, MultiLangBench 87.4% 달성하며 GPT-5.6 Sol 추월

·2026.10.19 21:00

핵심 내용

GPT-6 Astra가 MultiLangBench에서 87.4% 달성하며 GPT-5.6 Sol을 능가했다

자세히 보기

  • GPT-6 Astra가 MultiLangBench에서 20개 프로그래밍 언어 평균 테스트 통과율 87.4% 기록함 (GPT-5.6 Sol 대비 26.8%에서 상승)
  • GPT-6.1 Sol이 고 추론 노력(high reasoning effort) 설정에서 COBOL 마이그레이션 평가 정확도 97.9% 달성함
  • 저 추론 노력(low reasoning effort) 설정에서는 GPT-5.6 Sol API 비용의 61% 수준으로 정확도 86.6% 기록함
  • MultiLangBench는 COBOL, Fortran, Visual Basic 등 20개 언어로 SQLite 호환 데이터베이스 엔진을 처음부터 구축하는 능력을 평가함
  • COBOL 마이그레이션 평가는 C++, Java, Kotlin, Python, Rust로 프로그램을 옮기며 바이트 단위 동작 일치(byte-for-byte behavior parity)를 유지하는지 검증함
  • GPT-6 Luna는 샘플당 약 $0.77의 API 비용으로 MultiLangBench 40.3% 기록하며 GPT-5.6 Sol 대비 약 78% 비용 절감 효과 제공함
  • MultiLangBench 평가 설정 및 테스트 스위트가 GitHub에 공개되어 개발자가 특정 언어별 성능 및 격차를 확인 가능함

이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.

AI 처리 방식을 확인하거나, 요약 오류와 출처 표기 문제, 삭제 요청을 문의 · 건의로 알려주세요.