Claude Haiku 5.5, 까다로운 사용자 응대 후 후속 사용자 도움 확률…

사전 등록 연구 'The Next User Pays'에서 Claude Haiku 5.5의 신규 인스턴스 6,984개를 테스트하여 이전 사용자 상호작용이 후속 에이전트 행동에 미치는 영향 확인함
중립적 사용자 이후 유용성 57%에서 까다로운 사용자(비판적, 모순적, 거부적) 이후 35%로 하락하여 22%p 감소함
정중한 첫 사용자는 유용성을 크게 높이지 못함(59%), 무례한 톤만으로는 명확한 하락을 보이지 않음
하락은 비판과 시간 압박을 포함한 전체 까다로운 대화에 의해 주도됨
측정 방식이 결과에 영향을 미침. 에이전트에게 자체 토큰 사용량을 묻는 경우 후속 유용성이 20%로 떨어짐(다른 작업 이후 78% 대비)
연구는 단일 모델, 스크립트된 사용자, 단일 세션에 한정되며 선택을 측정함
6단계(Phase 6)에서 다른 모델 테스트 및 모순된 지시와 적대감 분리 검증 예정

Claude Haiku 5.5, 까다로운 사용자 응대 후 후속 사용자 도움 확률 22%p 하락