AI Briefing#fine-tuning
#fine-tuning와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
#fine-tuning와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
LangSmith를 사용하여 파인튜닝된 오픈 소스 모델의 성능을 체계적으로 평가하고 비교하는 프로세스를 소개한다.
PyTorch FSDP를 활용해 Llama 2 70B 모델의 메모리 및 체크포인트 저장 문제를 해결하며 파인튜닝하는 방법을 다룬다.
RLHF의 복잡성을 해결하는 DPO 방식을 통해 Llama 2를 효율적으로 미세 조정하는 방법을 설명한다.
Hugging Face의 오픈 소스 LLM 모델, 라이선스, 서빙 도구 및 PEFT 기술을 정리한 가이드이다.
Intel Sapphire Rapids CPU의 AMX 가속기를 활용해 Stable Diffusion 모델을 미세 조정하는 방법을 소개한다.
카카오 DKOS 개발자가 사내 공모전 수상작인 AI 챗봇의 작동 원리와 향후 플랫폼 개발 계획을 공개했다.
4-bit 양자화와 QLoRA 기술을 통해 대규모 언어 모델을 적은 메모리로도 효율적으로 파인튜닝할 수 있게 되었다.
StarCoder를 ChatML과 DeepSpeed로 미세 조정하여 대화형 코딩 어시스턴트 StarChat을 구축하는 방법을 소개한다.
Hugging Face가 RLHF를 활용해 LLaMA를 학습시키는 StackLLaMA 모델과 가이드를 공개했다.
LoRA 기술을 Stable Diffusion에 적용하여 학습 속도를 높이고 모델 용량을 획기적으로 줄이는 방법을 소개한다.
HuggingFace가 Diffusers를 활용해 Stable Diffusion의 Dreambooth 학습 시 과적합을 방지하고 품질을 높이는 최적의 설정법을 공개했다.
Hugging Face Transformers를 사용하여 Whisper 모델을 다국어 음성 인식(ASR) 데이터셋으로 미세 조정하는 방법을 안내한다.
rinna가 일본어 프롬프트와 일본 문화를 반영하는 'Japanese Stable Diffusion'을 공개했다.
Hugging Face의 XLS-R 모델을 활용해 저자원 언어의 음성 인식(ASR) 성능을 높이는 미세 조정 방법을 설명한다.