IBM Palette, PresentBench 2위 달성… Economics·Education 1위
Palette: teaching a small model to build decks in your design language
·2026.11.04 01:35
핵심 내용
IBM Palette가 PresentBench에서 59.7점으로 2위를 기록했다.
자세히 보기
- IBM Research가 IBM Design Language 등 특정 디자인 언어로 슬라이드 덱을 생성하는 20B 오픈웨이트 모델 Palette를 공개함. LoRA를 활용해 파인튜닝함.
- PresentBench 벤치마크에서 Economics와 Education 도메인 1위, Talk 도메인 3위를 기록함. 3개 도메인 평균 점수는 59.7점으로, 1위 시스템인 NotebookLM(60.8점)보다 1.1점 낮음.
- 생성 과정을 구조화된 JSON 브리프를 만드는 디자이너 역할과 pptxgenjs JavaScript를 작성하는 코더 역할로 분리함. 이를 통해 순차 생성보다 6~7배 빠른 병렬 슬라이드 렌더링을 구현함.
- 체크-리페어 하니스를 활용해 모든 슬라이드의 겹침과 오버플로우를 검증함. 131개 테스트 덱에서 측정 가능한 개선만 반영하는 방식을 적용해 평균 3.5점을 추가함.
- 덱 생성 근거에 대한 공개 데이터셋 부재 문제를 해결하기 위해, 대규모 오픈 티처 모델을 활용해 반사실(counterfactual) 추론 추적을 포함하는 약 1,000개 덱(10,000장 슬라이드)의 학습 데이터를 합성함.
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.