AI视频生成提速仍难摆脱反复试错与返工成本
AI生成视频通常只需几分钟,但从分镜到成片,创作者往往要反复生成和筛选,这种过程被称为“抽卡”。腾讯云WAND多模态应用负责人朱琳表示,一部AI短漫剧平均可能需要约10次尝试才能得到满意版本。生成速度提升,并不意味着创作者能同步获得理想结果,每次调用还会增加等待、人工筛选、修改和后期返工成本。
电商素材要求模型更换背景、调整光影的同时,准确保留商品形状、颜色和品牌标识,并批量生成主图、卖点图及场景图。视频则还要维持角色外观、动作、空间关系和镜头衔接的一致性。相关研究指出,长篇叙事视频仍受镜头控制、跨片段身份和角色行为一致性限制,剧本与生成模型之间缺少表达镜头及连续性约束的结构化中间层。即使是头部模型,在复杂光影和物理规律场景中也仍有不足。
生成不确定性会直接转化为成本。若一次生成费用为10元,平均10次才能得到可用镜头,生成费就是100元;若可用率提升至50%,平均两次即可成功,成本降至20元,尚未计入人工和后期费用。腾讯云披露,WAND通过模型优化、生成控制和后处理,已帮助客户降低约20%的综合内容生产成本。漫森文化将镜头可用率从约30%提升至50%—80%,稳定运营后约为80%;其精品AI短剧单部成本约10万—20万元,相关能力使成本再降约30%,效率提升约30%。紫讯科技接入WAND-Vega后,跨境电商图片素材有效使用率由50%—60%升至70%—80%。
降低返工并不只依赖模型本身。WAND尝试在生成前引入3D白模,先确定场景布局、物体位置和运动关系,再交给视频模型生成,以减少空间和镜头的不确定性;保险客户制作春节鞭炮事故及救护车到场情节时,也采用了这类流程。针对专业需求,WAND-Vega基于腾讯混元及部分开源基础模型进行后训练和调优,重点改善电商商品特征、短剧人物一致性及动作衔接,并提供偏性价比的Lite和偏质量的Pro版本,部分方案可降低约20%—30%的模型成本。
当视频主体已经合格、仅字幕或局部画面出错时,重新生成可能破坏原有内容。WAND-EraseVibe+采用基于隐空间Transformer的生成式修复架构,将画面编码到隐空间后重建问题区域,再解码回视频,从而以擦除、修复和生成式增强替代部分整段重做。多个模型和工具协作后,还需要工作流进行编排:漫森文化已将剧本、分镜、生成、增强和剪辑接入自研中台,Creative OS则让Agent根据自然语言需求选择模型并调用工具,已有82%的视频模型调用由Agent发起。
不过,Agent能够理解任务、安排步骤,却不能完全替代创作者判断。专业团队往往希望保留现有场景,只修改表情或镜头运动,并能检查和编辑中间结果,而不是每次重新生成完整画面。因此,多模态内容生产要实现稳定交付,除了提升模型质量和自动化程度,还必须提供可控、可复现、可编辑的关键节点,让创作者在必要时介入。
本文基于公开渠道信息整理,内容可能存在不准确或遗漏之处,不代表本站立场,如内容涉及侵权或错误,请联系我们处理。
阅读原文