웨비나 요약: 자연스럽게 말하는 AI 에이전트 만들기

대부분의 AI 에이전트는 정확한 답변은 내놓지만, 감정·맥락·긴박감을 읽지 못해 여전히 기계적으로 들린다. ElevenLabs의 Luigi Sambuy는 이를 극복하는 네 가지 핵심 특성으로 리듬·흐름, 감정 미러링, 맥락 반영, 브랜드 전용 음성 정체성을 꼽았다.

데모에서는 결혼 5주년 기념일에 예약을 변경하려는 고객과의 통화를 시연했다. 에이전트는 기념일을 먼저 축하하고, 예약 시간 불일치를 자체 수정하며, 창가 자리를 자발적으로 제안했다. 이 모든 동작은 더 강력한 모델이 아닌 시스템 프롬프트 설계만으로 구현됐다.

자연스러운 에이전트를 위한 7가지 레버:

• Emotional tags: v3 대화 모델의 표현 모드로 톤 변화 구현
• 배경 소음: 사무실 소음·타이핑 소리 등으로 친숙한 맥락 형성
• 시스템 프롬프트 톤: 가장 큰 차이를 만드는 요소
• Eagerness 설정: eager / normal / patient 중 상황에 맞게 선택
• 발음 사전: 브랜드명·고유명사 오발음 방지
• 출력 설정: 기존 콜센터 사용자를 위해 의도적으로 약간 먹먹한 음질 적용
• Voice design / cloning: 즉각 클론(30초 오디오) 또는 고품질 프로페셔널 클론으로 브랜드 전용 음성 제작

핵심 실천 원칙은 시스템 프롬프트에 톤을 명시적으로 작성하고, 감정 태그를 대화 흐름에 맞게 배치하며, eagerness를 상황별로 조율하는 것이다.