OpenShorts - 무료 오픈소스 클립 생성기 & AI UGC 비디오 제작 도구

긴 영상을 9:16 세로형 바이럴 숏츠로 자동 변환하는 셀프 호스팅 오픈소스 도구. TikTok, Instagram Reels, YouTube Shorts 제작을 지원한다.

세 가지 핵심 기능을 통합했다:

• Clip Generator: 롱폼 영상에서 바이럴 가능성 높은 순간을 자동 추출하고 얼굴 트래킹 기반 크롭, 자막 추가까지 처리
• AI Shorts: AI 아바타를 활용한 UGC 마케팅 비디오 생성. 제품 설명만으로 립싱크된 아바타 영상 제작
• YouTube Studio: 썸네일·제목·설명 자동 생성 및 유튜브 직접 업로드

Google Gemini 3.0 Flash가 트랜스크립트와 장면 경계를 분석해 15~60초 길이의 포텐셜 클립 3~15개를 추출하고, 감정적 임팩트·후크 강도·공유 가능성 기준으로 점수를 산정한다.

스마트 크롭은 MediaPipe 얼굴 감지와 YOLOv8 백업으로 피사체를 추적(TRACK 모드)하거나, 단체 샷·풍경용 블러 배경을 생성(GENERAL 모드)한다. faster-whisper 기반 자동 자막, ElevenLabs 연동 30개 이상 언어 AI 더빙, 첫 3초 후크 텍스트 오버레이, Gemini가 생성한 동적 FFmpeg 필터 이펙트를 지원한다.

100% 셀프 호스팅 방식으로 Docker 기반 배포가 가능하며, 영상은 사용자 인프라 외부로 유출되지 않고 API 키는 클라이언트 측 암호화로 서버에 저장하지 않는다. TikTok·Instagram·YouTube 대시보드 직접 게시, 비동기 업로드 진행률 추적, S3 백업을 지원한다.

Google Gemini 무료 티어(일 1,500 요청), ElevenLabs·Upload-Post 무료 티어를 적극 활용해, Opus Clip·Kapwing 같은 월 $15~228 유료 도구를 무료·무제한·무워터마크로 대체할 수 있다.

기술 스택: Google Gemini 3.0, faster-whisper, YOLOv8, MediaPipe, FFmpeg, ElevenLabs, fal.ai, React + Vite, Docker. MIT 라이선스로 공개됐다.