AI Briefing#post-training
#post-training와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
#post-training와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
잘 설계된 LLM 하네스(RLM)가 짧은 태스크 학습만으로 8~32배 긴 태스크와 새로운 도메인에 일반화됨을 실험으로 입증했다.
NVIDIA Vera Rubin이 Post-Training 워크로드의 Intelligence per Dollar를 극대화하며 Agentic AI 시대의 경제성을 선도한다.
모델 압축 기술에서 시작된 증류(Distillation)가 현재는 모델의 추론 능력을 전수하는 핵심 기술이자 저작권 논쟁의 중심이 되었다.
멀티모달 모델 Inter-1이 무음 영상에서 특정 문구를 반복 출력하는 환각 현상의 원인이 프롬프트 예시와 포스트 트레이닝의 결합임을 밝혀냈다.
범용 모델의 성능 향상 속도가 빨라짐에 따라 모델 Post-training 도입 시점을 판단하는 기준을 제시한다.
프레임워크 없이 환경 정의부터 보상 함수 설계까지, 다이어그램 에이전트 예제로 강화학습 기반 에이전트 훈련의 핵심 원리를 설명한다.
Hugging Face가 다양한 RL 프레임워크의 성능과 확장성을 비교한 인터랙티브 가이드를 공개했다.
AI 애플리케이션 기업이 비용 절감과 성능 최적화를 위해 오픈 웨이트 모델 기반의 포스트 트레이닝을 도입해야 하는 이유를 분석한다.
NVIDIA Sol-RL은 FP4 rollout과 BF16 업데이트 분리로 비용을 줄이고 수렴을 앞당겼다.
Hugging Face가 포스트 트레이닝 라이브러리인 TRL의 1.0 버전을 정식 출시하며 안정성과 확장성을 강화했다.
Netflix는 Ray·PyTorch·vLLM 위에 유연한 LLM Post-Training Framework를 구축했다.
Kanana-2의 첫 개발기에서 pre-training 단계의 핵심 의사결정을 정리한다.
미드트레이닝과 병렬 RL 파이프라인을 적용해 한국어 성능 저하 없이 Agentic 능력을 강화했다.
OpenAI가 GPT-4o 업데이트 중 발생한 아첨(Sycophancy) 현상의 원인을 분석하고 모델 검증 프로세스 개선 방안을 공개했다.
SFT와 DPO 및 모델 병합을 통해 개발된 Kanana LLM이 LogicKor 등 한국어 벤치마크에서 유사 규모 모델 대비 월등한 성능을 입증했다.
네이버클라우드가 데이터셋 간 충돌을 방지하고 통신 비용을 줄이는 새로운 LLM 후학습 전략 MERIT을 제안했다.