AI 코딩 어시스턴트를 영상 제작 스튜디오로 바꿔주는 에이전틱 시스템
🎬 OpenMontage
https://github.com/calesthio/OpenMontage
이 오픈소스 프로젝트는 엄청나게 주목받고 있어요.
Claude Code, Codex, Cursor 같은 AI 코딩 어시스턴트에 자연어로 "이런 영상을 만들어줘요~~"라고 요청만 하면 됩니다.
그럼 에이전트가 직접 기획/대본/에셋생성/편집/렌더링까지 전 과정을 수행하는거죠.
별도의 영상 생성 모델 하나를 호출하는 도구가 아니라, 실제 제작팀의 워크플로우를 흉내 낸 파이프라인을 에이전트가 따라가는 구조예요.
차별점이 있는데 두 가지 경로를 모두 지원한다는 점!
이미지 기반 영상으로 AI로 이미지를 생성하고 Remotion으로 모션을 입히는 흔한 방식
실제 풋티지 영상이라고 Pexels, Archive org, NASA, Wikimedia 같은 무료/오픈 아카이브에서 CLIP 기반으로 실제 모션 클립을 검색하고 인덱싱해서 진짜 영상 클립으로 편집하는 방식
대단하죠. 별도의 코드 오케스트레이터가 없고, AI 코딩 어시스턴트 자체가 오케스트레이터..
API 키가 하나도 없어도 TTS + 오픈 아카이브 풋티지 + Remotion만으로 영상을 만들 수 있게 설계돼 있는 점이 좋아요.
스크립트를 쓰기 전에 유튜브, 레딧, HN, 뉴스 등에서 15~25개 이상 웹 검색을 먼저 하기도 하구요.
기능이 무지하게 많아요!
1 / 3
에이전틱 시스템 (Agentic AI System)
단순히 명령에 반응하는 것이 아니라 목표를 스스로 설정하고, 여러 단계의 작업을 자율적으로 계획·실행하는 AI 시스템. OpenMontage에서는 AI 코딩 어시스턴트 자체가 오케스트레이터 역할을 맡아 기획부터 렌더링까지 전 과정을 수행한다. 출처
CLIP (Contrastive Language-Image Pretraining)
OpenAI가 개발한 멀티모달 AI 모델로, 텍스트와 이미지를 동일한 임베딩 공간에 매핑하여 자연어 설명만으로 이미지나 영상 클립을 의미론적으로 검색할 수 있게 한다. OpenMontage에서는 Pexels, Archive.org 등 오픈 아카이브의 실제 모션 클립을 텍스트 쿼리로 인덱싱·검색하는 데 사용된다. 출처
Remotion
React 컴포넌트 코드로 영상을 프로그래밍 방식으로 생성하는 프레임워크. 기존 영상 편집 소프트웨어 대신 코드로 애니메이션과 타이밍을 정의하여 데이터 기반 영상 제작을 가능하게 한다. OpenMontage의 이미지 기반 영상 경로에서 생성된 이미지에 모션을 입히는 용도로 활용된다. 출처
AGPL-3.0 (GNU Affero General Public License v3)
오픈소스 소프트웨어 라이선스 중 하나로, 소스코드를 네트워크를 통해 서비스로 제공하는 경우에도 소스코드 공개 의무가 발생한다. GPL보다 강력한 카피레프트 조건으로, OpenMontage가 이 라이선스를 채택한 것은 상업적 SaaS 전환을 방지하고 오픈소스 생태계를 보호하기 위한 선택이다.
파이프라인 (Pipeline)
AI/영상 제작 맥락에서, 개별 처리 단계(리서치 → 스크립팅 → 에셋 생성 → 편집 → 렌더링)가 순서대로 연결된 자동화 작업 흐름. OpenMontage는 단일 모델 호출이 아닌 실제 제작팀의 워크플로우를 모방한 다단계 파이프라인 구조를 에이전트가 따라가도록 설계되어 있다.