Framefields, AI 에이전트용 WebGPU 기반 영상 합성 및 3D 렌더링 프레임워크 공개

Framefields 개요

Framefields는 Photoshop 스타일 합성, After Effects 스타일 모션 그래픽, Blender 스타일 3D 렌더링을 하나의 WebGPU 기반 프레임워크로 통합한 Apache-2.0 라이선스의 npm 패키지입니다. AI 코딩 에이전트를 위해 설계되었으며, 기존 멀티 기가바이트급 크리에이티브 스위트 없이 코드 우선(code-first) 영상 제작을 가능하게 합니다.

주요 기술 특징

• WebGPU 기반 성능: Puppeteer나 Chromium 같은 헤드리스 브라우저 오버헤드를 제거하고 하드웨어 프레임버퍼에 직접 렌더링합니다. 처리량은 60–120+ FPS, 워커당 메모리 사용량은 200–400 MB입니다.
• Slug GPU 알고리즘: 10,000px부터 1px까지 결정적이고 프레임 단위로 정확한 텍스트 렌더링을 지원합니다.
• 시각 효과: 50개 이상의 WebGPU 셰이더 라이브러리를 제공합니다.
• 3D 및 AI 기능: glTF/USDZ 임포트, 물리적 모션 블러를 지원하는 네이티브 3D 씬 그래프와 함께 RTMDet-Ins, RTMO 같은 온디바이스 AI 비전 모델을 통해 자세 추정 및 분할을 수행합니다.

배포 및 통합

클라우드 네이티브 배포를 지원하며, 플러그인 시스템을 통해 AI 에이전트가 npm 패키지를 사용하여 스캐폴딩과 렌더링을 수행하도록 지시합니다.