乐于分享
好东西不私藏

[AI工具箱] AIComicBuilder:写好的剧本别放着,丢进这个开源工具直接变动画

[AI工具箱] AIComicBuilder:写好的剧本别放着,丢进这个开源工具直接变动画

NEWS

点击蓝字 关注我,每天分享AI小工具

写在前面

产品名称:AIComicBuilder

是否开源:是

是否收费:否

需要注册:否

本地安装:支持

难易程度:一般

外网访问:否

项目简介

        AIComicBuilder 是一款开源的动画管理工具,干的事很先进——把写好的剧本直接帮你变成带字幕的动画短剧或漫剧视频。

        可以把现成的剧本丢给它,它会自动解析文本、提取角色并生成四视图参考图包括正面、3/4侧、侧面、背面用来锁住角色长相,接着智能拆分成镜头、生成首尾关键帧,再插值合成完整视频并烧录字幕。

        整条流水线——剧本→角色→分镜→关键帧→视频→合成——可以半自动化跑完,也支持中途手动改分镜提示词或换图。接上OpenAI、Gemini、可灵、Seedance 等图片视频类模型就可以用,数据全存在自己本地电脑上。

食用指南

访问地址

传送门:https://github.com/LingyiChen-AI/AIComicBuilder

线上试用地址:https://comic.cturing.cn/en

开源地址

        这个项目应该是动漫产品里面做的比较完善的产品了,虽然没有做画布出来,但是整体的工作流的思路非常清晰,即使新手小白也可以很容易的上手。

操作与体验

项目主页

模型配置

        搭建好项目以后,先把模型配置一下,这边模型有3个,一个是LLM大语言模型,然后是图片生成的模型,推荐Image2,以及视频生成类模型推荐是Seedance2来生成。

角色库管理

        可以提前预置好角色库,角色库都是根据四视图来进行展示的,可以通过提示词来多次生成,得到自己满意的效果。

提示词管理

提示词修改

        对于创作类的,一般都会有自己一些固定的场景,角度,灯光等等的提示词,可以通过提示词库来进行统一的管控,可以很方便的修改调整提示词。

剧本导入

        具备支持多种格式导入,基本涵盖了常见的所有格式,直接把剧本丢进去就完事。

确认角色

        平台会自动根据小说内容拆分出角色清单,然后对每个清单进行分解,分段描述便于后面生成对应的角色试用

确认分集

        确认分集类型的生成,短剧视频不像小说,一般大纲类的,确认好每个分集生成的内容,便于后续视频剧情的推动

角色管理

        这边可以使用之前预置好的角色,也可以全新生成,根据剧本的特点等进行多次微调

剧本管理

剧本管理

AI剧本优化

        剧本的剧情内容就可以直接引用内置好的提示词来进行管理,对于不满意的剧情可以让AI配合多次生成。

分镜管理

分镜修改

        分镜生成,这边最重要的是生成出分镜的首尾帧以及描述清楚要生成的视频内容,因为这个阶段就是定后面视频内容的生成质量了。

          前面的角色库,提示词库,都是在为分镜进行服务,每个分镜的连贯,一致才不会让观众觉得出戏。

分镜预览

        视频生成好以后,可以对单个视频内容进行效果的浏览,也可以合并多个分镜的内容整体流量,当然想要效果更好,可能还需要进行一个剪辑。

写在最后

        从剧本导入到角色提取、分镜生成再到视频合成,AIComicBuilder把一整条动画生产链路串了起来。虽然最终成品还需要自己动手剪辑润色,但最耗时的那部分脏活累活已经替人干完了。

        项目完全开源免费,数据存在本地也不用担心隐私问题。找个周末把环境搭起来,把自己写过的小说或剧本丢进去跑一轮,看看AI会讲出一个什么样的故事。