OpenComputer, Claude Opus 5.5 기반 'Ship Video' 에이전트 공개

OpenComputer가 Anthropic의 Claude Opus 5.5를 활용해 URL이나 텍스트 프롬프트를 짧은 설명 영상으로 변환하는 오픈소스 에이전트 Ship Video를 공개했다. 이 프로젝트는 확산 기반 영상 모델을 사용하지 않고, LLM이 HTML, CSS, JavaScript 코드를 작성해 이를 결정적으로 렌더링하는 새로운 AI 영상 생성 방식을 제시한다.

작동 방식

OpenComputer 플랫폼에서 서버리스 에이전트로 실행되며, microVM 런타임(Amazon Linux 2023, arm64, 4 vCPU, 8 GB RAM)을 사용한다. 워크플로에는 세 가지 핵심 도구가 포함된다:

• web_fetch: 제공된 URL에서 페이지 텍스트, 제목, 디자인 요소(색상, 글꼴)를 추출한다.
• check_scene: 생성된 HTML을 헤드리스 브라우저에 로드해 특정 타임스탬프에서 JavaScript 오류와 표시되는 텍스트를 확인한다.
• render_video: 가상 시계를 사용해 requestAnimationFrame 같은 표준 브라우저 타이밍 함수를 대체하여 결정적인 프레임 단위 탐색을 가능하게 한다. 프레임은 헤드리스 Chromium으로 캡처되며, ffmpeg(libx264, crf 18, 1920x1080, 30 fps)을 통해 MP4로 인코딩된다.

기술 사양

• 모델 사용량: 영상 생성당 약 90k 입력 토큰과 15k 출력 토큰이 소모되며, 출력의 대부분은 생성된 코드다.
• 인프라: 에이전트는 TypeScript로 정의되며 opencomputer deploy를 통해 배포된다. OpenComputer가 세션 API, 모델 게이트웨이, microVM 수명 주기를 관리하므로 개발자는 외부 서버나 큐를 설정할 필요가 없다.
• 저장소: 완성된 영상은 Vercel Blob에 공개 URL로 저장되며, 보안 강화를 위해 업로드 토큰은 특정 경로로 범위가 제한된다.

이용 가능 여부

이 프로젝트는 오픈소스로 GitHub(diggerhq/shipvideo)에서 확인할 수 있다. 사용자는 원클릭으로 에이전트를 자신의 OpenComputer 계정에 배포하거나, 제공된 빠른 시작 가이드를 통해 저장소를 클론해 맞춤형 에이전트를 구축할 수 있다.