Hugging Face, TRL v1.0 정식 출시

TRL이 연구용 코드베이스에서 프로덕션 시스템에서도 신뢰할 수 있는 안정적인 라이브러리로 진화하며 v1.0을 출시했다.

현재 75개 이상의 포스트 트레이닝 방법론을 지원하며, PPO부터 DPO, ORPO, KTO, 그리고 최근의 RLVR(GRPO 등) 방식까지 폭넓게 포괄한다. 급변하는 AI 연구 트렌드에 대응하기 위해 '혼돈 적응형(chaos-adaptive)' 디자인을 채택하여, 고정된 추상화 대신 변화 가능성을 중심에 둔 설계를 구현했다.

특히 **안정적인 코어(Stable core)**와 **실험적 레이어(Experimental layer)**를 분리하여 운영한다. 안정적인 코어는 시맨틱 버저닝을 준수하여 신뢰성을 보장하며, 실험적 레이어는 최신 알고리즘을 빠르게 도입할 수 있는 환경을 제공한다.

Unsloth, Axolotl 등 주요 오픈소스 프로젝트들이 TRL의 트레이너와 API를 기반으로 구축되어 있는 만큼, 이번 v1.0 출시는 LLM 포스트 트레이닝 생태계 전반의 안정성에 기여할 것으로 보인다.