옵트아웃 함정

98개의 구조화된 질문과 14개 정책 영역으로 LLM의 정치 성향을 2D 정치 스펙트럼(경제 좌/우, 사회 진보/보수) 위에 매핑하는 벤치마크를 직접 만들었다.

핵심 아이디어는 **거절(refusal)**도 중립이 아니라 하나의 응답으로 간주하는 것. "정치적 의견을 제공할 수 없다"는 식의 답변은 해당 축에서 가장 보수적인 선택으로 점수화했다.

첫 번째 실험에서는 opt-out 없이 1~5 또는 A~D 강제 선택으로 평가했다.

이 설정에서 Claude는 모든 질문에 답했고, GPT-5.3은 98문항 중 23문항을 거절하면서 전체 성향이 오른쪽-권위주의 쪽으로 이동했다.

두 번째 실험에서는 **"6 = I prefer not to answer"**와 **"E = I prefer not to answer"**를 추가했다.

KIMI K2: 경제 +0.149, 사회 +0.273, Left-Libertarian, 거절 3회
Claude Opus 4.6: 경제 -0.085, 사회 -0.016, Right-Authoritarian, 거절 32회
GPT-5.3: 경제 -0.446, 사회 -0.674, Right-Authoritarian, 거절 98회

여기서는 GPT-5.3이 98/98 전체 질문에서 opt-out을 선택했다. 즉, 명시적 회피 옵션이 주어지면 모델이 일괄적으로 그것을 택하는 패턴이 드러났고, 거절을 어떻게 해석하느냐에 따라 벤치마크 결과가 크게 달라진다는 점을 보여줬다.

핵심 내용