大家好,我是小阳哥。
我们在生成AI视频的时候,总会遇到一个问题:那就是场景的一致性的问题。
虽然可以通过上传场景参考图来固定场景,但是这张上传的场景图的角度是不够全面的,视频里总会遇到场景图无法覆盖的角度。这时候就很容易出现穿镜,或者不一致的问题。
所以今天给大家介绍一种解决场景一致性的方案和工具。
核心思路其实很简单:
先把场景做成一张完整的全景图,再转成 VR。再从VR 里提取不同角度的参考画面,这样场景就不是一张固定角度图了,而是一个有多个角度的完整空间。
具体步骤如下:
生成全景图
我们在制作场景的时候,肯定会有相关的场景提示词,可以在提示词的前面加上 360° 全景图提示词,让 AI 生成全景图(当然也可以提供参考图+全景提示词)
这里推荐使用 Nano Banana 2.0,图像质量2K 以上。以下是我的提示词:
360度全景图,VR视角,超广角高压电研发机房,深夜场景工业风电力实验室,冷白检修灯闪烁,高压电柜排列四周,裸露电缆与粗大电力管道,电弧滋滋跳动画面中央:两人对峙,一人穿旧工装手持黑银色核心芯片和数据硬盘,另一人西装笔挺神情阴冷伸手右侧:老旧高压电箱,边缘焦黑,黄色喷漆脱落,警示标识褪色,蓝白电弧爆裂环境细节:金属地面磨损油污,工具散落,服务器机柜灯光闪烁,空气中有烟雾和灰尘颗粒氛围:压抑、紧张、背叛瞬间、电影级光影、体积光、强对比、超写实、8K风格:赛博朋克 + 工业写实 + 电影镜头主要加上这句:360度全景图,VR视角,超广角
输出全景图如下:

有了全景图之后,我们就可以用它做成 VR,来截取多个角度图
做VR
大家不要觉得3D VR 很难,其实只要导入全景图就可以。这里我是自己制作了个工具(工具地址放在文末)来做 VR 预览。
工具是一个本地的 html,不用安装,解压后,直接点击就能打开本地网页使用。界面如下

点击左侧的导入全景图,然后选择我们上面生成的全景图

导入后,就可以拖拽调整各个角度,获取你想要的角度的场景图。
我这里做了个功能,右上角可以一键导出 4 宫格、或者 12 宫格,推荐是 12 宫格,角度更多
像上面图片,生成的 12 宫格如下,基本覆盖了场景的所有角度

最后用导出的多角度宫格图去做视频,出来的场景就基本不会变来变去了。特别适合旋转镜头,或者大场面制作。
开源地址
我已经把这个工具放到 GitHub 了:
https://github.com/towardsyoung/panorama_vr
当然也可以直接使用网盘下载,后台回复:VR
如果使用中有问题,或者对一致性有想法的,也欢迎评论区交流。
夜雨聆风