Stability AI와 Arm, 온디바이스 오디오 생성을 위한 Stable Audio Open Small 출시 협력

Stability AI가 Arm과 협력하여 3억 4,100만 개의 파라미터를 가진 경량 텍스트-오디오 생성 모델인 Stable Audio Open Small을 오픈 소스로 공개했다. 이 모델은 Arm CPU에 최적화되어 스마트폰과 같은 온디바이스 환경에서 실시간에 가까운 오디오 생성을 가능하게 한다.

Arm KleidiAI 라이브러리를 활용해 설계된 이 모델은 다음과 같은 기술적 강점을 갖는다:

• 경량화: 기존 Stable Audio Open(11억 파라미터) 대비 훨씬 작은 341M 파라미터 규모.
• 고속 생성: 스마트폰에서 11초 분량의 오디오를 8초 미만에 생성할 수 있는 빠른 속도.
• 효율성: Arm CPU에서 완전히 구동되어 별도의 고성능 하드웨어 없이도 엣지 디바이스에서 저비용으로 실행 가능.

이 모델은 드럼 루프, 폴리(foley), 악기 리프, 앰비언트 텍스처 등 짧은 오디오 샘플과 효과음을 생성하는 데 최적화되어 있다. 특히 실시간 응답성이 중요한 모바일 및 엣지 디바이스 배포에 매우 적합하다.

Stable Audio Open Small은 Stability AI Community License에 따라 상업적 및 비상업적 용도로 모두 무료로 사용할 수 있다. 모델 가중치는 Hugging Face에서, 코드는 GitHub에서 확인할 수 있다.