AI BriefingArete-27B, SFT만으로 중국 정부 서사 채택률 22%에서 0.9%로 낮춤
Arete-27B: SFT만으로 중국 정부의 정치적 입장을 대변하는 답변을 22% → 0.9%로 개선한 Qwen3.8-27B 기반 모델 (feat. NousResearch)
·2026.11.13 16:30
핵심 내용
5,280만 토큰 SFT로 중국 정부 서사 채택률을 22%에서 0.9%로 낮췄다.
자세히 보기
- Nous Research가 Alibaba Qwen3.8-27B를 SFT만으로 재학습한 오픈 웨이트 모델 Arete-27B를 Apache 2.0 라이선스로 공개함
- 자체 평가셋 Propaganda_Eval(803개 프롬프트) 기준 중국 정부 입장 채택 비율이 22%에서 0.9%로 감소하고, 사실 점수는 2.32에서 2.98로 상승함
- 표현의 자유 범주에서 사실 점수 0.89에서 2.44로 개선되며, 채택 비율은 60%에서 1%로 낮아짐
- 약 5,280만 토큰 데이터로 2에폭 학습하며, Thinking Machines Lab의 Inkling(975B MoE)을 교사 모델로 사용함
- Hermes Bench에서 0.17%p 감소로 잡음 수준을 보였고, Terminal-Bench 2.1에서는 3%p 증가했으나 공식 성과로 주장하지 않음
- 평가 및 학습 데이터 모두 영어 전용이며, 중국어 및 한국어에서의 성능 변화는 미확인임
- 공개 자산으로 가중치, Propaganda_Eval 데이터셋, 학습 데이터, 채점 코드를 제공함
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.
