LLM 출처 귀속 연구: 무관한 전문가가 신뢰도 저해

I tested whether changing who an argument is attributed to changes how LLMs evaluate the exact same argument [R]

·2026.11.03 13:25

핵심 내용

무관한 전문가에게 논증을 귀속하면 신뢰도가 낮아진다는 연구 결과가 나왔다.

10개 주제, 20개 논증, 4가지 출처 조건(관련 전문가, 무관한 전문가, 비전문가, 출처 없음)을 활용해 출처 귀속이 LLM 평가에 미치는 영향을 검증한 새로운 프리프린트 공개함
'무관한 전문성 페널티' 관측됨. 무관한 분야 전문가에게 논증을 귀속하면 출처가 없는 경우보다 신뢰도가 낮아지는 현상 발생함
동의도와 논리도 차원은 출처 귀속에 덜 민감하게 반응함. 논증 강도에 따른 상호작용 효과는 통계적으로 견고하지 않음
GPT-5.6 Sol, Claude Opus 5.5, Gemini 4 Argon, DeepSeek Flash를 평가 대상으로 삼음. 해당 프리프린트는 아직 동료 검토(peer review)를 거치지 않음

이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.

AI 처리 방식을 확인하거나, 요약 오류와 출처 표기 문제, 삭제 요청을 문의 · 건의로 알려주세요.