OpenAI, Codex 기반 Performance Factory로 ChatGPT 성능 회귀 자동 수정
·2026.11.19 17:00
핵심 내용
OpenAI가 Codex 기반 시스템으로 ChatGPT 성능 회귀를 자동 진단 및 수정한다
자세히 보기
- OpenAI의 Performance Factory는 Codex를 활용해 ChatGPT의 성능 회귀(regression)를 탐지, 조사, 수정하는 자율 시스템임
- Regression Workflow는 1,700건 이상의 조사를 추적하고 600개 이상의 근본 원인을 식별했으며, 하루 평균 17건의 자동 조사를 수행함
- 수동 리뷰를 통한 근본 원인 제안 중 70%가 정확했으며, 나머지 30%는 추가 정제 또는 인과 관계 확인이 필요함
- 시스템은 수동 분석에서 시작해 task service, dispatch loop, 클라우드 기반 Codex, 이벤트 구독으로 구성된 4개 컴포넌트를 갖춘 완전 자동화 엔드투엔드 에이전트 워크플로우로 진화함
- 에이전트가 첫 번째 그럴듯한 설명에서 멈추지 않도록 가설이 반대 증거와 대조적으로 테스트되도록 하는 적대적 리뷰(adversarial review) 프로세스를 포함함
- 시스템은 자체 도구 실패를 모니터링하고, 오류가 여러 조사를 방해할 때 수정 작업을 생성하는 자가 복구(self-repair)를 지원함
- 향후 방향으로는 알림이 트리거되기 전에 성능 데이터를 비교해 지연을 찾는 선제적 최적화 및 코드 리뷰와 병합을 위한 에이전트 자율성 탐구가 포함됨
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.