乐于分享
好东西不私藏

当你的 AI 编码助手变成了一个完整的视频制作工作室

当你的 AI 编码助手变成了一个完整的视频制作工作室

当你的 AI 编码助手变成了一个完整的视频制作工作室

GitHub Trending 日榜第一,19K Star,3.7K Star/天 —— OpenMontage 凭什么一夜爆火?


一句话说清楚

OpenMontage:世界上第一个开源的、Agent 驱动的视频制作系统。你把 AI 编码助手(Claude Code、Cursor、Copilot 等)打开,用自然语言描述你想要什么视频,Agent 会自动完成研究 → 写脚本 → 生成画面 → 配音 → 配乐 → 剪辑 → 渲染的全流程。

它不是又一个「输入一句话,吐出一个生成视频」的工具。它是一个完整的 12 条生产线,对应 12 种视频类型:动画讲解、纪录片蒙太奇、宣传片、播客剪辑、本地化配音、屏录教程……每条线都有独立的「导演 Skill」来指导 Agent 怎么干活。


为什么突然火了?

三个字:免费 + 开源 + 真视频

目前的 AI 视频领域被闭源模型垄断——Veo、Sora、Runway Gen-4,都是按月订阅或按次计费。OpenMontage 直接支持本地运行开源视频模型(WAN 2.1、Hunyuan、CogVideo),配上免费的 Piper TTS 做配音,Pexels + NASA + Archive.org 做素材——零 API 费用也能出片

而且它解决了 AI 视频的一个老毛病:很多所谓「AI 视频」其实只是几张图来回晃。OpenMontage 的纪录片管线能真正剪辑真实的历史档案影片,而不是把静态图动一下就叫视频。


核心亮点

1. Agent-First 架构,不是代码编排

最特别的设计:没有代码化的「调度器」。你的 AI 编码助手本身就是编排器。

流程是这样的:

你说:"做一个 60 秒的黑洞讲解视频"
  ↓
Agent 读取管线清单(YAML)→ 知道该走哪几步
  ↓
Agent 读取「导演 Skill」(Markdown)→ 知道每一步怎么执行
  ↓
Agent 调用 52 个 Python 工具 → 搜索、生成图片、合成语音、剪辑
  ↓
每一步都有 自检 + 多人审核 + 状态存档 → 可暂停、可续传
  ↓
渲染前质量门禁 → ffprobe 验证、帧抽样、音频分析
  ↓
最终视频输出

所有创意决策和质检标准都写在可读的 Markdown/YAML 文件里,你可以检查、修改、定制。每步决策都有审计日志:Agent 为什么选这个模型不用那个,什么置信度,都记下来。

2. 覆盖 12 种视频类型

管线 产出 适合场景
Animated Explainer AI 生成讲解视频 教育、教程
Documentary Montage 真实档案混剪 纪录片、氛围短片
Cinematic 电影级预告/片花 品牌宣传
Clip Factory 长视频拆短视频 社交媒体运营
Avatar Spokesperson 数字人讲解 企业培训
Localization & Dub 多语言配音/字幕 国际化分发
Podcast Repurpose 播客转视频 播客营销
还有 5 条

每条管线都遵循同一套流程:research → proposal → script → scene_plan → assets → edit → compose

3. 真文档片 + 自检质控

最酷的管线是 Documentary Montage:Agent 从 NASA、Archive.org、Wikimedia Commons 等开源档案库中建立可检索的影像语料库,用 VLM(视觉语言模型)语义检索与脚本匹配的真实历史镜头,然后剪辑成完整的纪录短片。这对教育内容创作者来说太有用了——基于真实档案,不会出现生成式 AI 的历史错乱。

渲染完成后,系统会自动做后检:抽帧看画面有没有坏,检测音频有没有削波,验证成片是否兑现了用户的 delivery promise。如果你要的是一个「动感十足的视频」,但 Agent 悄悄把它做成了幻灯片——质检门禁直接拦住,不让你看到。

4. 成本透明到变态

官方给出了几个 Demo 的精确成本:

"The Last Banana"(60 秒皮克斯风格动画短片,Kling v3 生成,Chirp3-HD 旁白,Remotion 合成):$1.33
"VOID — Neural Interface"(产品广告,仅用 OpenAI API,4 张 gpt-image-1 生成图 + TTS):$0.69
"Afternoon in Candyland"(吉卜力风格动画,12 张 FLUX 生成图 + 运镜 + 粒子特效):$0.15
零 API 成本路径:本地模型 + Piper TTS + 免费素材,完全免费

怎么用?

git clone https://github.com/calesthio/OpenMontage.git
cd OpenMontage
make setup

然后在你的 AI 编码助手里说一句话就行:

"Make a 60-second animated explainer about how neural networks learn"

或者从参考视频出发:

"Here's a YouTube Short I love. Make me something like this, but about quantum computing."

支持 Claude Code、Cursor、Copilot、Windsurf、Codex 等主流 AI 编码助手。

零 API Key 也能跑:Piper TTS(免费离线语音)、Pexels + Unsplash + Pixabay(免费素材,开发者密钥免费申请)、Archive.org + NASA + Wikimedia Commons(开源档案)、Remotion/HyperFrames(免费开源渲染引擎)、FFmpeg。


点评

OpenMontage 火,不只是因为「免费」。它代表了一种新的范式:把 AI Agent 从「单次生成」升级到「多阶段、可审查的生产管线」

这和过去一年 Agent 框架的演进逻辑一脉相承——Devin 做软件工程管线,Harness 做 Agent 团队架构设计,OpenMontage 做视频制作管线。本质上都是在解决同一个问题:如何让 AI 不只是吐答案,而是按照人类可审查、可干预、可复盘的结构化工序完成任务。

不过话说回来,OpenMontage 目前还是开发者玩具——需要命令行、需要配环境、需要理解 Agent 的工作方式。它不是 Canva/剪映的替代品,而是给那些「愿意和 AI 深度协作创作」的技术创作者准备的。如果你既会用 AI 编码助手,又有内容创作的需求,这个项目值得试一试。

GitHub: calesthio/OpenMontage[1]
YouTube: @OpenMontage[2]


🧠 关于本栏目

最近一直在搭建自己的 AI 高效科研工作流。

让读论文、写代码、跑实验、写文章——每个环节都有一套经过验证的 SOP,持续迭代。我把这些方法都沉淀在了知识库里,核心不变:保持思考力和判断力。

如果你也在这条路上摸索,或者想看看我的科研心法,欢迎加我们微信 yogurt_6688(备注来意),一起交流,一起进步。

📣 另外,我们在小红书上线了 Claude Code 千页实战教程,清北复交团队出品,从零到精通,覆盖 Skills / MCP / Agent 开发全链路。搜索「清北复交千页实战教程」或直接扫码看详情 → https://xhslink.com/m/3bSHfXRkQEA

参考链接

[1] calesthio/OpenMontage: https://github.com/calesthio/OpenMontage

[2] @OpenMontage: https://www.youtube.com/@OpenMontage