乐于分享
好东西不私藏

AI 视频创作工具精选:4个开源项目覆盖编辑到音轨分离

AI 视频创作工具精选:4个开源项目覆盖编辑到音轨分离

AI 视频工具这两年爆发了,但大多数方案要么太重(需要 GPU 集群),要么太封闭(API 调用、按量付费)。

最近出现的 4 个项目,走的是另一个方向:轻量、开源、开发者在本地就能跑起来。覆盖了从视频编辑、产品视频制作、故事动画到音轨分离的完整链路。

Pireel:无后端的 AI 头像视频编辑器

⭐ 761 | TypeScript | AGPL-3.0 | 2026-07-20
github.com/pireel/pireel

Pireel 项目首页

做 AI 头像视频,通常需要后端服务渲染——上传脚本,等服务器合成,再下载。Pireel 的做法是:全在浏览器里完成。

基于 WebCodecs API,在浏览器端直接编码视频。支持故事板编排、图形设计、动态字幕和主题切换。MCP 驱动,AI 助手可以直接通过 MCP 协议调用它生成视频。

几个关键点:

零后端。 不需要部署服务器,不需要 GPU。打开浏览器就能用。视频编码走 WebCodecs,性能不错——1080p 短片的导出速度在秒级。

MCP 原生。 不只是 GUI 工具,AI Agent 可以通过 MCP 协议直接调用 Pireel 生成视频。适合做自动化视频生产流水线的一环。

故事板模式。 不是简单的「输入文字生成视频」,而是先搭故事板——场景、镜头、过渡——预览满意再导出。

适合做 AI 头像视频内容的人——教程、口播、短视频。不需要部署服务,浏览器打开就能用。

Video Shotcraft:106 种镜头模板的产品视频工具

⭐ 1.8k | TypeScript | Apache-2.0 | 2026-07-19
github.com/Vincentwei1021/video-shotcraft

Video Shotcraft 项目首页

产品视频制作的痛点:每次都要从头搭场景、调镜头、加动画。重复劳动。

Video Shotcraft 是 Claude Code / Codex 的 AI skill,基于 Remotion 构建。内置 106 种镜头模板和 161 种运动预览效果,用 AI 描述需求,自动生成视频。

镜头模板库。 不是从零写 Remotion 代码,而是从模板库里选——产品展示、功能演示、开箱、对比——每种镜头都有预设的动画和过渡。

AI 描述驱动。 在 Claude Code 里描述你的需求,比如「做一个 15 秒的产品演示视频,展示功能介绍、对比、总结」,skill 自动组合镜头、生成代码、渲染视频。

可直接投产。 生成的 Remotion 代码可以直接放进生产项目,不是 demo 级别的玩具代码。

适合做产品视频、营销视频的团队——高频产出,不想每次手动搭视频模板。

故事转手绘动画:中文故事秒变手绘视频

⭐ 638 | JavaScript | MIT | 2026-07-21
github.com/gnipbao/story-to-handdrawn-video

故事转手绘动画 项目首页

这个项目的定位很明确:输入中文故事,输出手绘动画视频。不是写实渲染,是手绘日记风格——像有人在白板上一边画一边讲。

技术路线:AI 把故事拆成场景,生成手绘风格的帧序列,合成无声 MP4 视频。支持中文输入,手绘风格统一,角色一致性有保障。

适合内容创作者——把故事、段子、文章转成手绘动画短视频。不需要任何视频制作基础,给文字就能出片。

Stemdeck:现代音轨分离平台

⭐ 1.9k | JavaScript | Apache-2.0 | 2026-07-03
github.com/stemdeckapp/stemdeck

Stemdeck 项目首页

从音乐中提取人声、伴奏、鼓、贝斯——音轨分离(stem extraction)的需求在音乐制作人和内容创作者中一直存在。以前要靠专业软件(iZotope RX、Logic Pro),现在有开源方案。

Stemdeck 是一个现代 Web 界面的人声/伴奏分离工具。上传音乐,后端用 AI 模型分离音轨,Web 界面预览和下载。不是简单调一个开源模型,而是做了完整的 Web 体验——上传、处理、预览、下载,一条龙。

技术栈:前端 Web 界面,后端 AI 模型推理。支持主流格式(MP3、WAV、FLAC)。分离结果可以单独下载每个音轨,也可以下载混音版本。

适合音乐制作人需要快速提取伴奏做 remix,或者内容创作者需要去掉背景音乐里的人声。


四个工具覆盖了视频和音频创作的不同环节。如果你做 AI 视频内容,Pireel 和 Video Shotcraft 是生产工具;如果你做故事类短视频,手绘动画工具值得试;如果你是音乐制作人,Stemdeck 是实用的音轨分离工具。

github.com/pireel/pireel github.com/Vincentwei1021/video-shotcraft github.com/gnipbao/story-to-handdrawn-video github.com/stemdeckapp/stemdeck

相关学习资料