多年来,微帧一直投入在图像增强算法的研发中。从噪声处理、细节恢复、色彩优化,到视频编码和终端呈现,我们习惯把一个视频放进完整的生产与观看过程中判断。它怎样生成,怎样优化,怎样压缩,怎样传输,最后又怎样出现在用户的手机、电脑和电视上。
进入AIGC时代以后,我们发现,以分辨率、清晰度为主的传统评价方式已经不够用了。
一条AI生成视频可以很清晰,人物依然带着明显的合成质感。
某一帧可以很好看,连续播放时,发丝、皮肤和服装纹理却会发生变化。
等等...
这些现象让微帧重新审视AI生成视频的视觉优化算法。面对AI生成视频,需要提升清晰度,也需要理解生成内容的特殊缺陷,兼顾真实质感、画面稳定、风格统一、编码后呈现效果和生产成本的同时,做出专项调优。
这也是像素智绘引擎的出发点。
看懂AI视频的特殊缺陷
传统视频中的模糊,通常来自拍摄条件、镜头运动、失焦、噪声或压缩。
AI生成视频则有不同的来源。
细节没有被完整生成。低分辨率AI生成视频中,微小结构往往只有大致轮廓,高频信息表达不足。
画面缺少连续性。AI生成视频中的细节未必能在所有画面里稳定存在,容易出现纹理漂移、轮廓抖动和光影闪烁。
皮肤质感不够真实。很多画面的五官结构已经完整,皮肤却过于平整,面部像覆盖了一层光滑薄膜,呈现明显塑料感。
易生成错误纹理信息。例如AI生成画面中的文字经常会出现笔画粘连、字体变形、内容错写和词不达意,或是常规图形符号出现畸变等问题。
为什么传统超分和画质增强算法不够用了?
传统超分和画质增强主要处理拍摄、传输和压缩带来的画质不足。它们通常利用画面中仍然存在的边缘与纹理补充像素,再通过去噪、锐化等方式改善观感。这套方法处理常规低清视频已经较为成熟。
AI生成视频的视觉问题大部分来自生成过程。局部细节可能从一开始就不完整,也可能在不同帧中改变形态。如果利用传统算法,只做插值、锐化或单帧纹理恢复,就可能把生成噪声、错误纹理和不稳定轮廓一起放大。

分辨率提高了,视觉效果未必会改善。AI生成视频因此需要一套全新的视觉优化算法。
针对AI生成视频的专项视觉优化
GenOpt像素智绘引擎不会看到模糊就直接补细节。系统会先分析画面语义、内容类型、运动状态,区分细节信息缺失、人像质感异常、生成过程带来的内容变化,以及画面闪烁漂移等问题。先诊断问题来自哪里,再决定视觉优化的范围和强度。

针对缺失的细节,像素智绘引擎内置画质置信度评估模块,自动判断画面的基础完整度,结合多尺度特征与画面语义,补全修复缺失的纹理、光影和人像细节。
针对AI人像的塑料感,结合面部结构、皮肤区域和光照关系,重点还原皮肤微纹理、明暗层次与高光表现,并利用相邻帧信息持续提升人物质感的自然度和稳定性。
针对帧间主体一致性的问题,提供跨帧特征预对齐能力,在生成过程中直接约束主体特征,降低人物变化、轮廓漂移和场景漂移的概率。
针对画面闪烁和抖动,结合运动估计与多帧特征对齐,识别连续画面中的异常跳变,对稳定区域加强时序约束,对快速运动和遮挡区域动态调整处理强度。
针对文字不准确等错误纹理问题,微帧正在持续钻研,当前重点方向是识别文字区域和可疑字形,优化文字内容、字体风格与背景纹理,同时保持文字在连续帧中的形态和位置稳定。此项研究,微帧正在通过模型训练和真实素材测试持续推进...

让成本真正降下来
直接提高生成分辨率可以获得更多画面信息,也会增加模型计算量。生成结果出现瑕疵后,若每次都重新运行完整生成过程,少量问题也会触发整条视频的资源消耗。进入批量生产以后,这些重试会成为一项主要成本。
像素智绘引擎可以接入现有生成流程,对AI生成视频进行视觉优化。已经完整的区域不重复计算,局部瑕疵也不必轻易触发整条视频重新生成,从而减少对高规格生成和多次重试的依赖。

经测试显示,像素智绘引擎可明显减少高质量内容所需的生成资源,部分场景降低约30%成本。随着生产规模扩大,单条视频节省的算力、时间和重复生成次数,会继续转化为整体生产成本的下降。
像素智绘引擎希望解决的,是高质量AIGC内容“做得出来,也做得起”的问题。
AI短剧-像素智绘引擎的首个落地场景
一项视频技术能否进入实际场景,需要同时接受输出效果、处理速度、接入成本和批量任务稳定性的检验。
目前,微帧已经与多家短剧客户展开合作,将像素智绘引擎接入实际内容生产流程。
短剧需要快速产出大量镜头,人物形象要在连续剧情中保持稳定,细节也要经得起手机屏幕上的近距离观看。像素智绘引擎会根据生产中的内容反馈持续优化,让处理结果更接近短剧的具体交付要求。
像素智绘引擎的接入,减少了高规格重复生成和逐条人工修复带来的生产压力,让短剧团队可以把更多精力放在剧情、镜头和人物表达上。

除了短剧,微帧也在推进像素智绘引擎在数字人、AIGC内容平台和视觉素材等场景中的应用。不同场景各有侧重,微帧建立的是一套能够适应不同模型、内容和交付环境的AI生成视频视觉优化体系。
让生成的视频更好,成本更低
AI生成视频需要怎样的视觉优化算法?微帧给出的答案是,一套区别于传统画质增强算法、真正面向AI生成视频的视觉优化系统——GenOpt像素智绘引擎。一套能够识别生成缺陷,理解人物、场景与运动关系,在清晰度、自然质感、画面稳定和最终呈现之间找到平衡,也能够进入真实生产流程,真正减少生成成本的系统。
Generate Better. Spend Less. 让生成的视频更好,成本更低。让每一次生成更接近可交付的成片,让内容团队用更少的算力、时间和人工成本获得更好的结果。
夜雨聆风