ElevenLabs, Gemini, Veo 2를 활용한 텍스트 기반 광고 생성기 구축기

단순한 제품 아이디어를 입력하면 시각 효과, 음성 해설, 효과음이 포함된 30초 광고 영상을 자동으로 생성하는 도구를 구축했다. 이 시스템은 ElevenLabs(TTS/SFX), Google Gemini, Veo 2를 핵심 엔진으로 활용한다.

전체 스택은 Node.js(Express) 백엔드와 React 프론트엔드로 구성되었으며, 개발 과정에서는 Claude 4 Opus를 활용해 제품 로직과 기능을 빠르게 구현했다.

광고 생성은 다음과 같은 8단계 파이프라인을 통해 이루어진다:

• 제품 정보 정의 및 스크립트 생성
• 비디오 생성 및 효과음(SFX) 제작
• 비디오 조립 및 음성 해설(Voiceover) 추가
• 최종 영상 완성 및 소셜 미디어 게시물 생성

Gemini 2.0 Flash는 모호한 아이디어를 구체적인 제품 컨셉으로 정교화하고, 4개의 장면(각 5초)으로 구성된 구조화된 JSON 스크립트를 생성하는 역할을 담당한다. 각 장면은 음성 해설, 비디오 생성 프롬프트, 효과음 설명을 포함하여 제품의 분위기와 타겟 고객에 맞춘 맞춤형 스크립트를 제공한다.