GitHub의 오픈소스 AI 비디오: 50개 이상의 파이프라인 리뷰 — 에이전트가 곧 디렉터다 (2026)

여기 주목해야 할 숫자가 하나 있습니다. 2026년 9월 초 기준, GitHub에는 지난 한 달 안에 커밋을 남긴 오픈소스 "스크립트-투-완성-비디오" 파이프라인이 50개가 넘습니다. 비디오 모델 50개가 아닙니다. 편집기 50개도 아닙니다. 50개 이상의 파이프라인 — AI 에이전트가 스토리를 스크립트에서 스토리보드로, 모델 호출로, 최종 조립까지 끌고 가고, 사람은 감독 의자와 조수석 사이 어딘가에 있다는 것이 전체 전제인 프로젝트들입니다.

우리는 정확히 이 영역에서 제품을 만듭니다 — Pixo는 같은 스크립트→스토리보드→생성→조립 루프를 호스팅 제품으로 실행하는 AI 비디오 디렉터 에이전트입니다 — 그래서 오픈소스 지형을 제대로 훑어보는 데 시간을 들였습니다. README를 읽고, 커밋 히스토리를 확인하고, 대표 프로젝트들을 저장소 하나하나 검증했습니다. 이 글은 우리가 발견한 것을 생태계가 갈라진 세 진영으로 정리하고, 각 진영의 천장이 어디인지에 대한 솔직한 평가 — 원클릭 도구에게 어려운 부분, 우리 것도 포함해서 — 를 더한 것입니다.

하나만 가져가야 한다면 이것입니다. 이 생태계에서 모델로 경쟁하는 곳은 거의 없습니다. 모델은 빌려 씁니다 — Seedance, Kling, Veo, Sora가 프로젝트마다 교체 가능한 백엔드로 등장합니다. 경쟁은 완전히 오케스트레이션 레이어로 옮겨갔습니다. 누가 "영화 만들어줘"를 신뢰할 수 있는 생산 라인으로 바꿀 수 있는가. 이는 우리가 AI 비디오 스택 분류에서 주장한 것과 일치하며, 오픈소스 세계가 방금 50개 이상의 확증 데이터 포인트를 제공했습니다.

세 진영 한눈에 보기

우리가 살펴본 방법

우리의 기준은 의도적으로 좁았습니다. 집계에 포함되려면 프로젝트가 에이전트 기반 프로덕션 파이프라인이어야 했고 — 즉 소프트웨어가 샷을 계획하고 생성을 오케스트레이션해야 하며, 단일 모델 API를 감싸기만 해서는 안 됩니다 — 지난 한 달 안에 커밋이 있는 살아있는 프로젝트여야 했습니다. 이 필터는 천 개도 넘는 "텍스트-투-비디오 래퍼" 저장소를 걸러내고 실제로 오케스트레이션으로 경쟁하는 프로젝트만 남깁니다.

이 글에 이름이 나오는 모든 프로젝트에 대해, 우리는 이번 주에 저장소를 직접 검증했습니다. 소유자, 스타 수, 마지막 릴리스, 그리고 README가 실제로 약속하는 것 대 코드가 담고 있는 것. 아래의 스타 수는 재활용된 숫자가 아니라 우리가 같은 날 직접 읽은 값입니다. 그리고 우리는 같은 모양의 상업 파이프라인을 운영하기 때문에, 이 프로젝트들을 라인 쿡이 다른 식당의 메뉴를 읽는 방식으로 읽었습니다 — 우리 자신의 에이전트 테스트에서 엔지니어링으로 극복해야 했던 것과 같은 실패 모드를 기준으로, 금요일 밤 러시를 버텨낼 것이 무엇인지 찾으면서요. 아래 표의 스타 수와 마지막 푸시 날짜는 2026년 9월 4일에 GitHub API에서 읽은 값입니다.

만들고 싶은 영상을 설명해 주세요…

Pixo

Pixo로 AI 영상 만들기

아이디어를 바로 게시하고 싶은 영상으로. 한 문장이면 충분합니다.

창작 시작하기

진영 1: 에이전트 스킬로서의 영화 제작

생태계에서 가장 활발하게 성장하는 곳은 앱이 전혀 아닙니다. 스킬입니다 — Claude Code와 Codex 같은 코딩 에이전트에 꽂혀 터미널을 프로덕션 스튜디오로 바꾸는, 패키징된 능력들이죠.

대표 사례는 video-shotcraft입니다. Claude Code나 Codex를 시네마틱 제품 비디오를 위한 모션 디자인 스튜디오로 바꾸는 스킬로, 타이밍과 이징 파라미터가 담긴 150개 이상의 "샷 레시피 카드", 200개 이상의 모션 프리뷰, 그리고 프로덕션에 바로 쓸 수 있는 Remotion 템플릿을 제공합니다. 같은 아이디어의 맥시멀리스트 버전은 OpenMontage입니다. 스스로를 12개의 프로덕션 파이프라인, 100개 이상의 도구, 700개 이상의 에이전트 스킬 파일을 갖춘 에이전틱 비디오 프로덕션 시스템으로 설명하며 — 코드 오케스트레이터 없이 "당신의 AI 코딩 어시스턴트가 곧 오케스트레이터"가 되도록 명시적으로 설계되었습니다. 그리고 browser-use의 video-use는 같은 철학을 편집에 적용합니다. 코딩 에이전트에게 "이것들을 론칭 비디오로 편집해줘"라고 말하면 필러 워드를 제거하고, 색을 보정하고, 자막을 추가합니다.

현실은 이렇습니다. 이 진영은 우리가 베팅한 아키텍처를 검증하지만, 그럼에도 우리는 대부분의 크리에이터를 여기로 보내지 않을 것입니다. 스킬 접근법은 이미 코딩 에이전트 안에서 생활하는 사람에게는 진정으로 강력합니다 — 조합 가능성은 진짜이고, 개발자 한 명이 일주일 만에 수직 파이프라인을 출시할 수 있습니다. 하지만 서식지의 모든 가정을 그대로 물려받습니다. 모든 모델의 API 키를 직접 가져와야 하고, 모든 생성 비용을 직접 지불하며, 텍스트 대화만 보며 맹목비행을 해야 합니다. 에이전트 기반 창작에서 우리가 끊임없이 보는 실패 모드는 긴 프로젝트에서 줄거리를 잃는 것입니다 — 샷 40에 이르면 아무도 샷 7이 어떻게 생겼는지 기억하지 못하고, 채팅 로그는 그것을 찾아보기에 최악의 장소입니다. 스킬은 여기에 답이 없습니다. 이것은 UI 문제이고, 스킬은 의도적으로 UI가 없으니까요.

스킬 자체는 무료이고 오픈소스입니다. 그 뒤에 있는 생성 호출은 아닙니다 — 모든 비디오 모델 호출이 여러분 자신의 API 청구서에 올라가고, 에이전트가 사랑하는 재시도 루프는 그 청구서를 빠르게 불릴 수 있습니다.

이런 분에게 적합: 이미 코딩 에이전트 안에서 작업하며, 특정하고 경계가 분명한 비디오 포맷을 자동화하고 싶은 개발자.

진영 2: 원스톱 파이프라인 플랫폼

스타는 이 진영에 몰려 있습니다. MoneyPrinterTurbo — "키워드 입력, 숏폼 비디오 출력"의 원조 — 는 확인 시점에 스타 120,000개를 넘겼지만, 이 아이디어의 이전 세대를 대표합니다. 샷을 생성하는 대신 스톡 푸티지를 조립하죠. 현재 세대는 끝에서 끝까지 에이전틱합니다.

학술적으로 진지한 항목은 HKU 데이터 인텔리전스 랩(Data Intelligence Lab)의 ViMax입니다. 디렉터, 시나리오 작가, 프로듀서 에이전트를 하나의 프레임워크에 담고, 아이디어-투-비디오, 스크립트-투-비디오, 소설-투-비디오 워크플로를 제공합니다. 숏드라마 전문가의 전형은 Toonflow입니다. ScriptAgent와 ProductionAgent가 무한 캔버스 위에서 작업하며 소설을 애니메이션 드라마로 바꾸는 오픈소스 "AI 숏드라마 공장"이죠. 그리고 NarratoAI는 해설 비디오 포맷을 자동화합니다 — 스크립트, 컷 편집, 보이스오버, 자막을 하나의 흐름으로.

가장 놀라웠던 것은 이 진영의 상당수가 같은 고객을 쫓고 있다는 점입니다. 숏드라마 프로덕션이죠. 플랫폼형 프로젝트의 큰 비중이 소설→에피소드 드라마 파이프라인을 겨냥하고, "한 문장 → 완성된 영화"가 표준 피치입니다. 우리도 AI 숏드라마에 많은 시간을 쏟아왔으니, 다들 조용히 하는 말을 소리 내어 하겠습니다. 원클릭 결과물은 볼 만하지, 게시할 만하지 않습니다. 샷 간 캐릭터 일관성, 오디오 싱크, 내러티브 페이싱이 바로 완전 자동화가 부서지는 지점이고, 이 진영의 최신 프로젝트들이 이제 "슬롯머신식 생성"에 반대하는 광고를 한다는 것은 시사적입니다 — 첫 물결의 재작업률이 잔혹했다는 자인이죠. 정직한 아키텍처는 장면마다 사람의 검토 게이트를 유지하는데, 그것이 바로 "한 문장 → 영화" 마케팅이 지워버리는 부분입니다.

셀프호스팅은 무료입니다. 진짜 비용은 모델 API 지출(보통 완성 1분당 몇 달러에서 수십 달러, 재시도가 지배적)에 여러분 자신의 DevOps 시간을 더한 것입니다. 우리 같은 호스팅 제품은 그 복잡성을 구독 요금에 접어 넣습니다 — 그 트레이드가 가치 있는지는 전적으로 여러분의 시간이 얼마인지에 달려 있습니다.

이런 분에게 적합: "충분히 좋은" 결과 품질을 받아들이고, 대량의 포맷이 안정적인 콘텐츠(해설 비디오, 숏드라마)를 만드는 기술 크리에이터.

진영 3: 스토리보드와 디렉터 캔버스

가장 작은 진영 — 프로젝트 몇 개 — 이지만, 전문 영화 제작자가 실제로 생각하는 방식에 가장 가깝습니다. 채팅 로그도, 블랙박스 파이프라인도 아니라, 샷들이 나란히 놓이는 캔버스.

이 진영이 작은 이유에 대한 솔직한 답은 이렇습니다. 캔버스는 파이프라인에 연결되어 있을 때만 가치가 있습니다. 다시 생성할 수 없고, 캐릭터 일관성을 유지하지 못하고, 편집을 생성 루프로 되돌려 보낼 수 없는 스토리보드는 예쁜 핀보드일 뿐입니다. 하지만 연결하면 조종석이 됩니다 — 샷에 동그라미를 치고 "이거 로우 앵글로 다시 찍어줘"라고 말하면, 에이전트가 프롬프트를 다시 쓰고, 모델을 다시 호출하고, 프레임을 다시 채웁니다. 그 루프가 바로 우리가 프롬프트 기반 편집과 시각적 스토리보드를 두 개의 기능이 아니라 하나의 시스템으로 만든 이유입니다. 분리되면 각각은 반쪽짜리입니다. 우리는 이 진영이 새 캔버스 프로젝트에서가 아니라, 진영 1과 2가 캔버스를 길러내면서 가장 빨리 성장할 것으로 예상합니다.

이런 분에게 적합: 생태계 전체가 어디로 향하는지 지켜보기.

세 진영 아래에 깔린 인프라 레이어

한 프로젝트는 따로 언급할 가치가 있습니다. HyperFrames(스타 43.9k), HeyGen의 오픈소스 렌더링 엔진으로 태그라인은 "Write HTML. Render video. Built for agents."입니다. 비디오가 곧 HTML 문서입니다 — 클립, 자막, 타이밍, 오디오가 엘리먼트와 데이터 속성 안에 살고, 덕분에 컴포지션이 diff 가능하고, 리믹스 가능하며, 코드를 쓰는 에이전트의 홈그라운드가 됩니다. 자리 잡은 비디오 회사가 자사의 합성 레이어를 에이전트를 위해 오픈소스로 공개한다는 것은, 업계가 퍽이 어디로 향한다고 생각하는지 알려주는 신호입니다.

우리가 배운 것

어떤 단일 프로젝트도 혼자서는 보여주지 못하는 세 가지 패턴이 드러났습니다.

첫째, 파이프라인이 모델을 이겼습니다. 50개 이상의 프로젝트 전반에서 생성 품질로 경쟁하는 곳은 사실상 없습니다. 모두 오케스트레이션으로 경쟁합니다. 모델은 필름 스톡이 취급되던 방식으로 취급됩니다 — 공급업체 선택의 문제죠. 이것이 우리가 어떤 단일 모델의 출시 주기에 제품을 걸지 않고 멀티 모델 라인업을 운영하는 이유입니다. 가치가 한 층 위에 살면, 모든 모델 업그레이드가 공짜 제품 업그레이드가 됩니다.

둘째, 무덤은 리더보드만큼 교훈적입니다. 한때 선두를 달리던 프로젝트 몇몇이, 수요가 계속 오르는 와중에도 올해 초 조용해졌습니다. 파이프라인을 살아있게 유지한다는 것은 주요 모델이 출시될 때마다 프롬프트, 샷 세분성, 비용 모델을 다시 튜닝한다는 뜻입니다 — 솔로 메인테이너를 태워버리는 월간 러닝머신이죠. 지속적인 오케스트레이션은 운영 비즈니스이고, 그래서 공짜로 나눠주기 어려운 것입니다.

셋째, 진영들이 수렴하고 있습니다. 스킬에는 상태와 시각적 검토가 없고, 플랫폼에는 미세 제어가 없고, 캔버스에는 파이프라인 깊이가 없습니다. 각 진영의 공백이 다른 진영의 핵심 기능입니다. 종착점 — 대화형 디렉터 에이전트, 시각적 스토리보드, 멀티 모델 오케스트레이션이 하나의 시스템에 담긴 형태 — 은 우리를 포함한 모든 진지한 상업 제품이 이미 수렴하고 있는 모양입니다. 오픈소스 세계는 같은 결론을 공개적으로 스피드런하고 있습니다.

어떻게 선택할까

아키텍처를 이해하고 싶은 개발자라면 — ViMax와 OpenMontage 소스를 읽으세요. 파이프라인 하나를 끝에서 끝까지 돌려보는 것이, 이 글을 포함한 어떤 블로그 글보다 많은 것을 가르쳐 줄 것입니다.

Claude Code에서 생활하며 하나의 포맷을 자동화하고 싶다면 — 자신의 틈새에 가장 가까운 스킬을 고르고(제품 프로모라면 video-shotcraft), 모델 지출에 엄격한 예산을 걸고, 재시도를 실제 그대로의 비용 센터로 취급하세요.

목표가 배관 공사가 아니라 게시인 크리에이터라면 — 셀프호스팅의 숨은 비용은 여러분의 창작 시간에서 빠져나갈 것입니다. 대신 호스팅 생성기들을 비교해 하나를 고르고, 에너지를 작품에 쓰세요.

이 분야를 평가하고 있다면 — 스타 수가 아니라 멈춰 선 저장소와 기업 진입자들을 지켜보세요. 둘 다 가치가 실제로 어디에 쌓이는지 더 많이 알려줍니다. 그리고 주요 엔진이 업데이트를 출시할 때 — 최근 사례는 Seedance의 릴리스 — 어떤 파이프라인이 일주일 안에 그것을 흡수하는지 보세요. 그 흡수 속도가 이 생태계의 진짜 해자 지표입니다.

방법론 노트: 우리는 2026년 9월 초 기준 GitHub의 오픈소스 AI 비디오 파이프라인 지형을, 지난 한 달 안에 커밋이 있는 에이전트 기반 스크립트→스토리보드→생성→조립 파이프라인(50개 이상의 저장소)으로 범위를 좁혀 검토했습니다. 위에 이름이 나온 모든 프로젝트는 작성 당일 직접 검증했습니다 — 소유자, 스타, 릴리스 히스토리. 스타 수는 우리가 같은 날 읽은 값입니다.