ElevenLabs, 에이전트 테스트 기능 공개

대화형 에이전트를 구축할 때 프롬프트나 워크플로우를 수정하면 성능 저하(regression)가 발생할 수 있다. ElevenLabs는 이러한 문제를 해결하기 위해 에이전트의 성능을 대규모로 검증하고 개선할 수 있는 ElevenLabs Agents Testing을 발표했다.

이 기능은 다음과 같은 핵심 영역의 성공률을 높이기 위한 구조화된 시뮬레이션을 제공한다:

• Tool calling: 외부 도구 호출 및 매개변수의 정확성 검증
• Human transfers: 상담원에게 매끄러운 전환이 이루어지는지 확인
• Complex workflows: 다단계 여정이 문제없이 완료되는지 보장
• Guardrails: 입력값에 관계없이 브랜드 가이드라인 준수 여부 확인

테스트는 직접 설계하거나 과거 고객 대화 데이터를 활용해 자동으로 생성할 수 있다. 또한 개발자를 위해 CI/CD 파이프라인에 통합할 수 있어, 코드 변경 사항이 프로덕션에 반영되기 전 문제를 사전에 차단할 수 있다.