연구진, 대화 유형별 Turn-taking 평가 벤치마크 'Turnbench' 공개

연구진이 대화 분석에 기반한 다중 도메인 Turn-taking 벤치마크 'Turnbench'를 공개했다. 이 벤치마크는 30시간의 수작업 라벨링된 인간 대화 코퍼스와 104시간의 학습 데이터를 포함하며, 종료 감지(EOT) 및 방해 감지(interruption)를 위한 재현 가능한 프로토콜을 제공한다. 성능 평가 결과, VAP 모델이 EOT recall 0.845, interruption recall 0.945의 높은 정확도를 기록했으며, EOT 지연 시간 368ms, interruption 지연 시간 994ms를 보였다. 반면 Gemini는 가장 낮은 FPR(0.01–0.03)을 기록했으나 recall은 0.61–0.71 수준으로 보수적인 성능을 보였다.