夜雨聆风学习资料网

ARTICLE · 1119401

又一个神级Skill:故事丢进去,AI自动生成上美影风短剧

又一个神级Skill:故事丢进去,AI自动生成上美影风短剧

今天聊一个 GitHub 上的开源项目,smy-seedance-storyboard,是个 Skill。

简单说,你给它一个故事,它会还你一堆做短剧用的文档,剧本、出图提示词、分镜提示词都在里面,基本上拿到手就能直接用。风格只有一种:上美影。

上美影就是上海美术电影制片厂,小时候看的《大闹天宫》《九色鹿》《葫芦兄弟》都是它出的,线条带手工感,颜色是大片平涂的矿物颜料色,造型很概括。这个项目干的所有事,说白了就是想办法让 AI 老老实实画出这个味道。

作者叫 liangdabiao,之前做过另一个项目 Seedance2-Storyboard-Generator,在 GitHub 上有两千多 star,算是比较早把「小说转多集视频」这套东西跑通的。现在这个就是在那个项目上改的,别的不做,只做上美影。首发在 linux.do,帖子里反响还可以。

它到底给你什么

举个例子,跟它说一句:帮我做一个武松打虎的上美影短剧,5 集。

它会给你这些东西:

  • • 剧本:按 5 集、每集 15 秒拆好,旁白、台词、字幕卡点都有;
  • • 色盘:这部剧专用的几个颜色,比如朱砂红、鎏金、墨黑、青瓷绿,从头用到尾,防止画面跑色;
  • • 素材清单:角色、场景、道具的出图提示词,贴进出图工具就能用;
  • • 每集分镜:按 Seedance 的时间轴格式写好的提示词,整段复制去出片;
  • • 尾帧说明:每集最后一帧是什么画面,写给下一集看的,这样集和集能接上。

这些内容全是中文,拿去中文平台直接用,不用翻译。想用 Midjourney 的话,素材清单里另外留了英文版,替一下就行。

《葫芦兄弟》剧照,剪纸风的参照对象

剧本这里,它是按四幕来写的,旁白用说书人的口吻,古典题材很吃这套,像武松打虎、夸父逐日这种故事,旁白一出来,那个味儿就有了。每集开头会先把这集的情绪定下来,后面分镜里的音效、色调,都跟着这个情绪走。

画风是怎么锁住的

我自己最感兴趣的,是它怎么对付画风跑偏这件事。

玩 AI 生图的人估计都碰过这种情况:你明明说了要上美影风格,出来的东西却油画味很重,颜色糊在一起,阴影渐变一大堆,跟记忆里的大闹天宫完全不是一回事。

它用的办法一共三层,作者在 README 里就写了一句话:都别改。

第一层,每条提示词的开头都粘同一段风格关键词,就是「上海美术电影制片厂复古手绘动画、传统矿物颜料纯平涂色块、带手工感的不完美笔触」这一串。

第二层,提示词结尾加两句狠命令:必须纯2D平涂!绝对不要阴影、不要渐变、不要3D体积感!必须大面积留白!作者标注了这是实测踩过坑才总结出来的,少了这两句,AI 很容易给你渲染成油画感的假上美影。

第三层,一部剧只用一个色盘,所有提示词逐字引用同一串颜色名,跨集不跑色。

真翻车了怎么办,也有说法。出来的图要是带了 3D 感、有阴影渐变,先看看结尾那两句狠命令还在不在,有时候是复制的时候手滑删了。

还在的话,就再补一组负面词:不要阴影,不要渐变,不要3D渲染,不要体积光,不要写实照片。这段问答就写在仓库的常见问题里,看那口气,应该是被问过太多次了。

我拿聂小倩的故事跑了一遍

安装没什么门槛,把仓库克隆下来,放进 Claude Code 的 skills 目录就行。其他支持 Skill 的 agent 也能用,直接把仓库地址丢给它让它装。

装好以后,我拿聊斋里聂小倩和宁采臣那段试了一下。手头 token 额度不多,就打算先做一集 15 秒的,把流程跑顺看看。

第一步,我直接说出我的要求:

然后它会根据我们的要求,交付一份制作文档:

内含 Prompt:

我看了一圈,也没什么修改的,直接确认。

第二步,生成三张资产图:

这步直接让豆包出图就行,原 Skill 这步让即梦出图的,我感觉没必要,现在 AI 对这类图生成效果我感觉差距不大。

第三步,出片:

直接用 Seedance2.5 即可,这个视频模型能力还是可以的,也不需要再切换了。当然工具不限,你用 WorkBuddy,Codex 或者其他的工具也都可以,影响不大。

来看看 15秒效果:

关注
重播 分享 赞

再看看1分钟40秒的效果:

每集的分镜MD最后还会附一段尾帧说明,就是告诉下一集,上一集的画面停在哪。

以后想做第二集的话,把这条视频传上去,提示词开头写「将@视频1延长」,它就从这个尾帧接着往下生成,中间不用自己剪。我这次只做了一集,这个功能没用到,先记在这。

想换画风也行

默认是手绘平涂主线,点名就能切换子风格,不过一部剧只能用一种:

  • • 石蓝淡墨绘本:石蓝加淡墨,疏离怪谈的绘本感,带一点怪色点缀;
  • • 水墨淡彩:淡雅写意,大量留白,参照《小蝌蚪找妈妈》;
  • • 剪纸风:分层剪影,对称纹样,参照《葫芦兄弟》;
  • • 敦煌重彩:壁画矿物色,飘带飞天,参照《九色鹿》。
《九色鹿》剧照,敦煌重彩的参照对象

仓库里还放了一个完整的示例项目「鲁智深醉闹五台山」,剧本、素材清单、E01 到 E05 分镜、使用指南,四件套都在。不想从零开始的,直接照着这份抄作业就行,看看人家的色盘怎么定、打斗戏的动静对比怎么写,比自己瞎琢磨快得多。

几个坑提前说

有几个坑,提前说一下。

先说参考图数量。 项目文档里写的是 Seedance 一次最多传 9 张参考图,视频参考最多 3 个,合计不超过 15 秒。角色多一点的故事很容易撞上这个上限,所以提前想好哪些素材真正需要出镜。我这次砍到四张图,多少也有这个考虑。

然后是敏感词,这个是个黑箱。 之前看别的作者分享过,「江湖人士」这种平平无奇的词都会导致视频生成失败,平台还不告诉你是哪个词触发的,只显示内容不合规,只能一段一段二分排查,那位作者光排查就花了快一个小时。所以提示词到手以后,最好先自己过一遍再往里贴。

再一个,提示词写长了模型会漏指令。 大概三四百字以后,某个时段的运镜可能没按你写的来,或者某个角色在那几秒里不见了,这种只能重新生成碰运气。

最后就是视频没法局部改。 15 秒里哪三秒不满意,没法单独修那一段,只能整段重跑。

这几条说起来都不算项目的毛病,平台现在就是这个水平,换别的工具一样要面对。

最后聊聊

我自己用下来,对这个项目印象最深的地方,是它什么都没多做。没有界面,也没堆功能,就是把风格锁定、色盘、分镜格式、集间衔接这几个最容易翻车的地方,一个一个写成文档模板,让 AI 照着填,上手特别简单。

就这么一个简单的 Skill,就能复刻出童年风格动画,真不错!

项目地址

https://github.com/liangdabiao/smy-seedance-storyboard

点击下方卡片,关注极客之家

这个公众号长期分享实用开源项目。如果你不想逐篇翻阅历史文章,可以直接关注微信公众号“极客之家”,通过后台留言与我们互动交流。

相关学习资料