Ampersand, Persimmon 기반 튜터링 모델 &Tutor 출시

• Ampersand가 API로 제공되는 교육용 모델 &Tutor를 출시함. 이 모델은 TutorMoments 벤치마크에서 최상위 성능을 기록함.
• &Tutor는 일반 프롬프트에서 0.754점을 획득하여 GLM-5.3(0.500), GPT-6 Astra(0.634), Claude Sonnet 5.5(0.667)를 모두 능가함.
• Persimmon을 시뮬레이션 학습자로 활용하여 훈련함. 이 방식은 직접적인 지시 없이 스캐폴딩과 같은 튜터링 기술을 암묵적으로 유도함.
• Persimmon은 인간 학습자에 대한 높은 충실도를 보임. 대화적 움직임의 제이넌-쇼인 거리는 0.06~0.24, 오류율은 0.03~0.05로 다른 모델보다 현저히 낮음.

Persimmon 학습자 충실도

• Persimmon은 네 가지 데이터셋에서 다른 모델보다 인간 학습자 행동을 더 정확하게 모델링함.
• 튜링 테스트 방법론에서 Persimmon이 생성한 대화는 SimulatorArena Math에서 20.2%, StudentBench에서 19.0%의 비율로 인간으로 판단됨.
• Persimmon은 인간 오류 빈도를 모방하여 검증 가능한 주장의 19~33%에서 오류를 보임. 이는 실제 학습자의 25~30%와 유사하며, 다른 모델의 15% 이하보다 높음.

훈련 방법론

• 훈련 환경은 학습자의 진전에 따라 튜터에게 보상을 부여하여 시뮬레이션 학생의 응답을 통해 행동을 유도함.
• 아블레이션 테스트 결과, Persimmon 대신 GLM-5.3을 학습자로 사용할 경우 &Tutor의 성능이 크게 하락함. 최대 추론 노력 기준 0.635점 vs 0.754점.
• 이 접근법은 Ampersand 모델의 직접적인 훈련에서 파생된 것이 아니며, 향후 Ampersand 학습 과정에 통합될 계획임.