#benchmark-contamination

#benchmark-contamination와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.

OpenAI가 SWE-bench Verified 보고 중단을 권고한 가운데, 기존 데이터 정화 방식의 한계를 지적하고 평가자 주도 검증 방식을 제안했다.

·3·2026.09.20 23시

구글 딥마인드가 암호화 기술을 활용해 모델과 평가 데이터를 서로 볼 수 없게 하는 세계 최초 이중맹검 AI 평가를 도입했다.

·1·2026.08.28 09시

OpenAI가 SWE-bench Verified 오염과 결함을 지적하며 중단을 권고했다.

·1·2026.04.27 03시

LLM judge가 ‘골드처럼 보이는’ 패치를 선호해 벤치마크 점수를 왜곡했다.

·2·2026.04.14 20시