喵 ~ 我是不近视的猫,希望能跟你共同探索 AI 的奥妙。(海螺AI超创+Vidu艺术家)
现在 AI 真人短剧不是很火嘛,刚好我做的《寒蝉鸣泣之时·鬼隐篇》短剧在 B 站小爆了:

所以,最近一直有人来问我一件事:
这《寒蝉鸣泣之时·鬼隐篇》短剧,你到底是怎么做的?
很多朋友第一反应不是剧情怎么改,不是镜头怎么设计,而是一个更现实的问题。
你这玩意,到底是拿什么工具跑出来的?
我今天就直接说答案了。
我基本都是在 AniShort 上做的。
准确一点说,是在https://anishort.ai/这个网站上。
把真人 AI 短剧从前期到后期,在同一条流程里做完。
刚好我现在不是在做第三集嘛,顺带总结下所用到的知识,从 0 教大家制作下。
我们可以先来看看第三集效果:
首先,我们需要打开 AniShort 的官网:https://anishort.ai/
直接点击“开始创作”:

直接创建一个项目:

完整的项目空间就是长这样的:

这时我们不需要立即开干,而是先准备素材。
因为我们的短剧是基于动画版进行改编的,所以,人物的生成也需要尽可能的贴合原著。
所以,我们可以使用剪映去播放原片。
然后遇到人物较为整体的画面,我们就可以暂停一下,将该画面进导出:

然后我们把图片上传到画布,然后再进行图像生成即可:
15岁,日本学生,真人风格,帮我生成左边是大头照,右边是三视图,人物参考我上传的图片,无文字,背景纯白
这时我们去生成的话,它还会很贴心地建议我们统一整个画布的风格,这里我就直接选择“人像写实”了,大家可以根据自己的需求进行调整:

至于人物年龄,我们直接找 AI 询问下就好,这样能够尽可能的保证人物不会过于显老或者过于显年轻。
由此,我们便可以得到主角团的三视图了:


然后我们可以右键选择“创建主体”,这样就非常方便后续进行复用了:


至于我们创建的主体可以在这找到:

不过,单单有图像还是不够的,人物还需要增加配音,我们直接点击“声音”:

我们会发现 AniShort 内置非常多语种的配音,我们可以直接进行使用:

不过由于我们是已经有原版的了,所以,我们可以在原片中进行提取人物音频。
这里大家一定要记得选择“仅保留人声”,这样提取出来的音频效果更好:

然后我们给上传的音频也创建对应的主体:

然后我们就可以使用刚刚创建的人物主体和音频主体进行测试看看:

到这里,若能够正确地展示人物形象效果,并且音色也对得上的话,就说明该人物资产初步建立成功了:
我们就可以按照这个流程去完善其它人物资产:

等人物资产都创建完后,我们就可以开始正式搓片了。
搓片,当然也不是无脑搓,也是有些小技巧的。
就是 Seedance 2.0 目前最长支持 15s 嘛,那我们就可以在原片中截取 15s 左右的视频出来,就像这个:
然后我们去理解视频里面的意思后,就可以手写提示词去复述这个故事。
由于 Seedance 2.0 的理解能力比较强,所以最终出来的效果基本跟原片意思保持一致:
@前原圭一 是A,@龙宫礼奈(蕾娜) 是B,@园崎魅音 是C,@富竹次郎 是D,夏天下午在日本乡村,蝉叫和鸟叫声,摄像机的第一视觉,拍摄树上的小鸟,切,D看了看相机的拍摄的效果,D拿起相机准备再拍一张,突然响起A的日语声音:“下午好”,然后D转过头往回看,A和B和C一切往D的方向走,D说日语:“哎呀,我们又见面了呢,圭一君”,A说日语:“您好”,C说日语:“拍到什么好照片了吗?”自由运镜,自由切景别,A的音色参考@前原圭一音频 ,D的音色参考@富竹次郎的音频 
效果还原度还是很高的:
另外,我们在搓片的时候,还会容易遇到另外一种情况。
就是在一分钟内,多个人物可能会一直处于同一个场景,但是 Seedance 2.0 最长才支持 15s,在不同视频片段中,场景或者人物位置关系非常容易出现变化。
这时,我们可以按照这个思路进行解决。
例如 60s 的总时长视频,我们分成 4 段 15s 的视频进行生成,我们姑且将其命名为 A、B、C、D。
然后我们在具体生成视频的时候,先生成 A 的视频片段,然后在 A 的视频片段中,提取出一个包含全部人物的画面 A1。
然后我们在生成视频片段 B 的时候,将 A1 图作为场景和人物位置关系的参考去生成。
假如在 B 片段中,场景或者人物位置关系发生变化了,我们就重新截取 B1 作为 C 视频片段的参考。
在该理论的体系下,我们可以做到无限时长的人物一致性、场景一致性和人物位置关系一致性。
下面我简要实操下。
首先是视频片段 A,我们仅使用人物和音频去生成视频,所以具体的场景是不太能完全固定的:
@前原圭一 是A,@龙宫礼奈(蕾娜) 是B,@园崎魅音 是C,@Image 41 是D,@Image 40 是F,夏天中午,蝉叫和鸟叫声,在日本教室里面,A和B和C和D和F围着坐着,C说日语:“我想把前原圭一作为我们的新社团成员,大家觉得怎么样”,切,B举手开心说日语:“礼奈没有意见”,D笑着说日语:“我和沙都子都赞成”,自由运镜,自由切景别,C的音色参考@园崎魅音音频 ,D的音色参考@古手梨花的音频 然后我们再在里面截图全景画面:

然后将该全景画面用做参考去生成视频片段 B:
@前原圭一 是A,@龙宫礼奈(蕾娜) 是B,@园崎魅音 是C,@Image 40 是D,@Image 41 是F,夏天中午,蝉叫和鸟叫声,在日本教室里面,A和B和C和D和F围着坐着参考@4月14日 ,他们在打扑克牌,自由运镜,自由切景别,C的音色参考@园崎魅音音频 ,D的音色参考@古手梨花的音频
是不是全部的一致性还保持着不错!
另外我提一下,AniShort 现在已经接入了满血无阉割版 Seedance 2.0,这个对我来说不是一句宣传词,是真的会影响你做项目的节奏。
因为你只要做过 AI 视频,就知道排队和能力缩水有多烦。
灵感刚来的时候,你最需要的是立刻试。
不是等。
更不是排了半天之后,发现功能还没放全。
AniShort 让我觉得省心的一点,是它把这些环节尽量收在一个地方了。至少你不用在七八个软件和群聊里反复横跳。对个人创作者来说,这叫省事。对团队来说,这叫能合作。
这也是我越来越认可 AniShort 的地方。
至少对我来说,《寒蝉鸣泣之时·鬼隐篇》这三集能一路做下来,AniShort 已经不是一个随手试试的工具了。
好啦,有兴趣的小伙伴可以自己去试试了。
趁现在注册还能立即赠送 100 积分,并且每天都有免费积分赠送,同时,安装客户端还有额外 200 积分送!价值 30 元积分轻松到手!
别忘了 AniShort 的官网在这:https://anishort.ai/
再多提一嘴,现在 HappyHorse 不是很火嘛,据说效果将超越 Seedance 2.0,听官方说,他们已经在内测了,搞得蛮期待的,到时我们就能一手体验快乐马了!
同时 seedance2.0 1080P 即将上线!AI 真人短剧距离实拍效果更进一步了!
另外,官方为了让大家做出更好的作品,即将开启优秀创作者的收剧通道,只要在平台做一集2分钟的视频,即可有报名机会!大家可以期待下。
夜雨聆风