AI Briefing#dpo
#dpo와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
#dpo와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
rank-16 LoRA로 슬롭 점수 83% 감소, 품질 저하 없이 스타일 교정 성공했다.
올리브영이 NLL 지표를 활용해 AI Pick 추천 카드의 자연스러움과 형식 준수율을 동시에 개선하는 정렬 학습 방식을 공개했다.
Fyxer가 50만 시간의 인간 EA 데이터를 학습한 AI 비서로 90일 사용자 유지율 90%와 초안 수용률 53%를 달성했다.
NeurIPS 2023에서 발표된 RLHF 및 RLAIF의 최신 연구 동향과 주요 논문을 소개한다.
LLM의 성능 향상을 위한 RLHF 및 RLAIF의 최신 연구 트렌드와 DPO, Fine-Grained RLHF 방법론을 소개한다.
학습 전 데이터 분석을 통해 모델의 행동 변화를 예측하고 데이터셋을 최적화하는 기술을 소개한다.
30억 파라미터 전문화 모델이 Claude Opus, GPT-5.4 등 모든 상용 프론티어 API를 OCR 벤치마크에서 능가했다.
DPO 학습과 배우 녹음 데이터로 감정 표현력 향상, 한국어 이미지 기반 벤치마크에서 GPT-4o 추월
SFT와 DPO 및 모델 병합을 통해 개발된 Kanana LLM이 LogicKor 등 한국어 벤치마크에서 유사 규모 모델 대비 월등한 성능을 입증했다.
HuggingFace의 TRL 라이브러리가 시각 언어 모델(VLM)을 위한 직접 선호도 최적화(DPO) 기능을 지원한다.
RLHF의 복잡성을 해결하는 DPO 방식을 통해 Llama 2를 효율적으로 미세 조정하는 방법을 설명한다.