일본어 특화 Stable Diffusion 공개

rinna Co., Ltd.가 Stable Diffusion을 일본어 캡션 이미지로 파인튜닝한 Japanese Stable Diffusion을 개발했다.

기존 Stable Diffusion은 영어 데이터셋(LAION-2B-en) 기반으로 학습되어, 일본어 프롬프트 사용 시 번역 과정이 필요하며 일본 특유의 문화적 맥락이나 슬랭을 정확히 반영하기 어렵다는 한계가 있었다. 예를 들어, 'salary man'과 같은 일본 특유의 개념을 시각화하는 데 어려움이 있었다.

Japanese Stable Diffusion은 일본어 프롬프트를 직접 수용하며, 일본어권의 문화, 정체성, 고유한 표현을 이해하여 이미지를 생성한다. 해당 모델은 Hugging Face와 GitHub를 통해 공개되었으며, Diffusers 라이브러리를 기반으로 구현되었다.