AI Briefing#slopcodebench
#slopcodebench와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
#slopcodebench와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
UW–Madison의 SlopCodeBench는 진화형 코딩 작업에서 15개 에이전트를 평가해 77%의 실행에서 구조적 열화 증가를 보고했다.
GPT-6 Astra가 SlopCodeBench에서 16.3%의 최고 엄격 통과율을 기록하며 1위를 차지했다.
SlopCodeBench 연구 결과, AI 에이전트 생성 코드는 인간 코드보다 중복과 복잡도가 약 2배 높으며 최신 모델도 엄격한 테스트에서 0% 통과율을 기록함.
SlopCodeBench 벤치마크 결과 Opus 5는 17개 체크포인트 중 4개만 통과해 장기 코딩 신뢰성 부족 드러났다.