烧了1W积分,我的AI制片翻车经验
AI发展到现在,有干得好的,也有没眼看的。总体下来,干得好的都是相似的,干不好的各有各的原因,而我身上集齐了所有干不好的原因。
写下来,长教训,避坑,别学我。
起因是年前做了一个剧本,有些地方不满意,一直想重写成小说,把丢的脸捡回来,定稿以后再考虑有机会重新走画面。刚好碰到了一个漫剧制作的活动,就想拿改得差不多的一小段文本试试,也借此有目标地玩一下AI。
无知者无畏,打算做个90秒的样片,我以为这是个小case。
第1个错误:不做关键帧、分镜图,不学提示词,不挂参考视频,直接文生。
想当然文生了一两个人物图和场景图以后,就开始急吼吼上去直接文生视频,而且一生就是15秒。
没几个回合下来,积分废了几千。
出来的效果惨不忍睹,不说seedance2.0如何牛吗?不是自然语言就可吗?就这?实际上,sd2.0之所以厉害,是因为它的多参能力强,没有参考图和参考视频,或者提示词里没有清晰地给他挂到某个学过的东西上,让他跑就是一种浪费。而此前一些测评师出的效果,是在基于了小范围设定+大范围自由发挥之后的惊喜,那些内容大部分不需要做前后剧情逻辑承接,而我这种按固定脚本走的需要剧情逻辑承接的,耗不住这种抽出来的惊喜。更准确地说,惊喜的用处不大,重点还是要可控。
所以,从整体的大框架上来说,必须用分镜图来控,在可控的范围内,再让模型给惊喜。
权衡之后,我开始自己加限制,根据脚本来先出一个分镜图,再参考分镜图出视频,一顿操作后,出来的几秒钟算有点那个意思,虽然还是差很多,但如果扔到剪辑工程里包装包装,勉强能用。
所以,这是第2个错误:将就。
我的审美已经算差了,在差的基础上再将就将就,出来的东西就没法看。
比将就更可怕的,是第3个错误:风格没定好。
风格用真人,还是3D,还是漫画?上了真人,角色包都出完了,结果SD2.0总是不给过真人,又全部换回漫画,太假了不喜欢,又想办法换回类真人,还要保证能过审。风格不协调又没眼看,今天看看能将就的,明天再看就手痒想改了,这一秒忍住不改,下一秒又没眼看,回去编辑编辑重新生,一来二去返工,耗时耗力耗积分,生来生去无穷尽也。
紧接着还有第4个错误,就是偷懒不去生一些道具图。
由于没提前理出所有分镜图,以为某个道具只会出现在一个画面里,不需要做一致性,就没有单独去出道具,比如一道光束,在上个画面里是白色,下个画面里是红色,我只能收起我的懒惰,重新做一个光束的图,替换掉所有出现光束的地方,还要控制光束出现的位置、大小、飞行方向、消失时间。
这光就造了我小半天。
但这还只是几秒钟的视频,要完成90秒,还需要几十个这样的几秒钟。
于是,又做了第5个错误的决定:继续按上述流程把剩下的几十个片段生出来。
我这流程明显是个野路子,一般只有几秒钟的东西是直接上即梦或可灵这种平台生,长了都要走正规工作流的。
实际上,活动平台已经给出了全套专业化的工作流,资产库方面有人设-角色三视图-场景-道具,工作流方面从脚本-分镜-分镜图-故事板-逐项生视频-精编器精确调整,全都囊括了,操作也方便,我明明知道工作流怎么走,却懒得去研究和学习新平台的操作步骤,想着几十个小视频嘛,没几下就生好了,别搞那么复杂。硬生生把综合性平台当作生成器用,技术小哥都看哭了,说他的精编器功能可牛了我没用上。
不吃学习的苦,就要吃生活的苦。一把年纪了,这金句还能在我身上得到验证。
就我这个干活的态度,平台都不应该把积分给我。
干这个活充分暴露我的偷懒属性。给点分镜图和人物图,写一堆提示词,就指望模型给我生一个长达15秒、期间能自己转场、智能断点、知道用什么景别、还懂得精准推拉摇移的片段出来?
期待啥?别想了。
我愚蠢的脑袋瓜子又开始了第6个错误:既然15秒的长镜头你做不好,那就让你只生一个画面。5秒-8秒的小片段,嗯,出来还行。但是5秒接下一个5秒,动作长度不够,很割裂,怎么办呢?要么用首尾帧来控,效果好,但是很费事。而且目前的模型里,首尾帧和全局参考不能同时选。
末了,我将生好的视频扔到剪辑工程里,看到视频画面虽然表述完了,但空间时长达不到观众的心理预期,而且前后衔接不好。
还是回到分镜的问题,毕竟不像实拍,可以多拍几秒,最后想怎么剪都行,现在要么用模型来续写,要么在第一次生成的时候就宁多勿少。
前面15秒的效果差,主要是因为想要的内容模型没塞进去,不想要的部分,它拖沓了很久,导致整段不能用,现在需要研究下怎么让它听话。
积分没多少了,为了省着点用,我终于愿意去看看说明书里的提示词怎么写的了。
为了保证剧情的流程,我还是用10-15秒的长镜头,中间用提示词做切分。比如0-X秒的主体内容+景别+运镜+风格+细节,以此类推,总算有点像样了。
只要提示词、参数、资产够精准,基本1-3次抽卡就够了。再多就是提示词要在学习,或者模型达不到了。
剩下的视频还有一半没做,我还可以改过自新,老老实实按流程走,但那就不是我了。
视频都已经做得差不多了,让自己苦难到底吧。
人性就是这么赤裸裸,宁愿难受痛苦,也不愿意改变。
我把半成品给董事长看,他提了个还不错的意见,我又补了几个镜头。但整体还是拿不出手,就不放出来丢人了。
总结:
1、用标准工作流,能避坑、能规范、能省力、方便返工、后期扩展,也方便协同合作。目前市面上有很多不错的,比如小章鱼、libtv、与光等等,即梦也在出了估计快了。
2、一次性理完脚本,不容易会漏掉人物、场景、道具的资产出图。
4、要做分镜图,要做分镜图,要做分镜图。
3、要定好风格,风格统揽全局,定好了不要变。
4、对镜头时长要有敏感度,哪怕不用首尾帧生,心里也有个规划,如果不可控,宁长勿短。
5、剪辑:情绪情感第一重要,情绪关乎时长,时长关乎节奏。
6、做擅长的题材。
7、加强审美、学视听语言,建立适合自己的美学体系。
顶级老公梁宽植——韩剧史上最大造梦骗局|《苦尽柑来遇见你》第4集拆解
夜雨聆风