关闭广告

Utopai联手LG、中东主权基金加码韩娱,新模型颠覆AI视频格局!

机器之心Pro116人阅读

机器之心发布

机器之心编辑部

当 Sora 2、Google Veo 3 还在卷短视频逼真度,AI 影视的下一站该是长片叙事了?

在 AI 视频生成技术日新月异的今天,主流模型如 Sora 2、Google Veo 3 等已能生成视觉惊艳的短视频片段,但想要创作长视频甚至是影视作品时,AI 模型似乎开始变得力不从心。

然而,在好莱坞,一家 AI 影视公司却已经拔地而起,开始将 AI 影视生成技术从模型验证推向大规模产业化。

11 月 3 日,据 Deadline 报道,AI 原生影视工作室 Utopai Studios 与全球创新投资平台 Stock Farm Road(SFR)宣布成立资本规模达数十亿美元的合资公司 Utopai East,以加速韩国影视的国际化进程。

SFR 背后,一面是 LG 集团继承人 Brian Koo,另一面是阿联酋主权基金推动者 Amin Badr-El-Din。



报道显示,此次合作中 Utopai Studios 将成为 SFR 在娱乐领域的独家 AI 技术合作伙伴,依托 SFR 在韩国规划的 350 亿美元 AI 数据中心枢纽,构建下一代影视制作基础设施。



在这场以韩娱为核心的产业协同背后,隐藏着 Utopai 希望系统性攻克的关键命题:如何让 AI 真正理解并驾驭影视长片的叙事逻辑,进而实现从「短片生成」到 「长片制作」的工业级跨越?



视频链接:https://mp.weixin.qq.com/s/ACTi_DYghRP2rFKSungTeQ

核心问题:为何传统视频模型难以驾驭长片制作?

目前主流视频生成模型(如 Diffusion)的本质还是概率性生成器,它们逐帧或短片段独立生成视频,缺乏对长叙事逻辑的全局规划能力。

当视频生成目标从「生成片段」升级为「制作长片」时,Diffusion 模型的短板开始凸显:

  • 长程一致性崩塌:角色外貌、场景元素在跨镜头时容易出现「漂移」,例如服装颜色突变、人物外貌畸变等。
  • 叙事可控性不足:模型难以理解剧本中的因果链条(如情绪的递进转换),生成的内容往往与导演意图偏离。
  • 物理合理性缺失:模型仅学习 2D 像素统计规律,缺乏对三维空间遮挡、碰撞等规则的认知,易产生反物理的「幻觉」。

Utopai 带来的解决方案则是直击痛点 ——不再追求单一模型的极致优化,而是通过架构重组,让不同模型各司其职。

技术架构:规划与渲染解耦的协同范式

Utopai 在技术上的重要创新是构建了分层协同架构,其中自回归模型(AR)负责「规划」,扩散模型(Diffusion)负责「渲染」,二者通过统一状态空间耦合。

1.规划层:自回归模型作为「导演大脑」

  • 序列预测机制:AR 模型以剧本为输入,通过前帧预测后帧的机制,生成涵盖角色 ID 向量、摄像机轨迹、光影变化等要素的时空计划。该计划本质是一个机器可执行的「拍摄蓝图」,确保长达数十分钟的片长中元素演进逻辑保持一致。
  • 状态记忆与因果推理:模型能够维护可回放的长程状态记忆,例如追踪角色从第 1 镜到第 50 镜的动作轨迹,避免传统模型因局部生成导致的逻辑断裂。

2.渲染层:扩散模型作为「执行引擎」

  • 条件化生成:扩散模型不再随机「抽卡」,而是严格依据规划层输出的结构化指令(如深度图、光流信号)生成画面。例如,当规划层指定「摄像机以俯角拍摄雨夜小巷」 时,扩散模型就会据此渲染细节。
  • 物理规律注入:通过训练时引入带精确标注的 3D 合成数据,模型学习空间遮挡、材质反射等规则,避免生成内容违反重力或碰撞逻辑。

3.协同接口:统一状态空间

  • 规划层与渲染层通过统一状态空间交换信息:规划器输出未来帧的几何与语义约束,渲染器据此生成像素,并反馈生成结果供规划器优化后续计划。这一闭环解决了扩散模型「生成即遗忘」的缺陷。

简单来说,Utopai 的突破就在于构建了一种融合自回归模型与扩散模型的协同架构,通过「规划 — 渲染」解耦的协同范式,将 AI 从「画面生成工具」升级为「叙事协作伙伴」。

训练方法论:从 2D 统计到 3D 物理规律的跃迁

Utopai 模型能力的基石是其独特的训练策略,训练的核心是用 3D 物理规律替代 2D 像素统计。

1.预训练阶段:几何与语义对齐

通过使用高质量 3D 合成数据(如虚拟城市、动态物体),训练模型去理解场景的深度信息,如材质属性、运动轨迹等,而非仅学习网络视频的像素分布;通过构建「下一状态预测」「掩码重建」等任务,强制模型推理物体遮挡关系(如角色绕过桌椅而非穿模)。

2.微调阶段:多模态指令遵循

在这一阶段,引入剧本、分镜等专业数据,训练模型将抽象指令(如「史诗感」)转化为具体视觉元素(如低角度镜头、暖色调光影)。

这样的训练方式使模型能处理复杂指令,例如当要求角色「由怀疑转为恍然大悟」时,模型能够协调人物角色的面部微表情、肢体语言、镜头焦距的同步变化,而非简单替换表情贴图。

可量化的技术优势:定义 AI 电影叙事的新指标

当前 AI 视频领域的通用指标(如 FVD、CLIP Score)主要衡量视觉逼真度和文本符合度,但无法有效评估「叙事质量」。

Utopai 的核心优势之一,正是建立一套基于专业影视标准的内部评估体系,其在三个维度超越传统方案:

1.一致性指标

相较于通用模型在几秒后可能出现角色特征「漂移」的现象,Utopai 的系统旨在跨越数十甚至上百个镜头,仍然稳定保持核心角色身份、场景布景和光影逻辑的连续性。这种一致性不是简单的「不变化」,而是按照叙事逻辑的「合理演进」。

2.剧本指令遵从度

Utopai 能够量化生成内容与复杂剧本指令的匹配程度。例如,当剧本要求「角色从犹豫转为决绝」时,AI 模型能通过姿态、视线、镜头语言与光影的协同变化,呈现出符合表演逻辑的情感转变,而非生硬的表情切换。

3.制作效率的跃升

这样的架构能极大优化专业影视制作的前期流程,导演可通过修改时空计划(如调整摄像机轨迹)精准控制生成结果,无需反复「抽卡」,将创意迭代周期从数周缩短至几天。

Utopai 的实践揭示了一条代表范式转变的技术路径:影视级 AI 模型的未来不是替代 Diffusion 或 AR,而是通过架构创新实现专业化分工。

在这里,AI 不再是辅助工具,而是能够理解导演愿景、具备电影级思维的真实创作伙伴。

正如 Utopai 创始人兼 CEO Cecilia Shen 所言:「AI 可以生成无穷选项,但定义品味的永远是会讲故事和有艺术审美的人。」

而此次合作也不仅是资本层面的联手,更是以韩国为战略枢纽,整合 AI 技术、算力基建与内容生态的系统性布局。

当技术的成本壁垒被 AI 击穿,电影制作的未来将更多地取决于想象力的边界,而非预算的多少。那些曾因「拍不起」而被搁置的宏大叙事,或许正奔跑着拥抱 AI 影视,阔步走向好莱坞大荧幕。

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

博主成功拆解苹果 iPhone Air,刮去背板涂层打造“透明版”机型

IT之家 浏览 141

布朗尼谈浓眉:他是一位传奇,也可以在球场减轻我的压力

懂球帝 浏览 2657

欧洲杯-西班牙1-0送阿尔巴尼亚出局 西班牙头名出线

网易体育 浏览 2888

日本在台附近部署进攻性武器 中方回应

环球网 浏览 62

权力重构?泽连斯基亲信部队高层遭反腐

浏览 488

首次搭载 STELLAR.45 驱动单元,拜雅推出 MMX 300 PRO 游戏耳机

IT之家 浏览 17785

大众汽车将CARIAD降级,大象转身倒逼战略转向!

百姓评车 浏览 144

初秋“不露腿”也能穿得美:裤选长、裙及踝,优雅得体又应季

静儿时尚达人 浏览 171

A股,大消息!

券商中国 浏览 2497

美国父亲在家喝酒将2岁女儿留车内致身亡 入狱前自杀

红星新闻 浏览 137

共建链上数商生态,推动区块链与实体经济深度融合

文汇报 浏览 149

TA:维拉已与卡什就续约达成原则性协议,将续约至2029年

懂球帝 浏览 141

《红舞鞋》剧组被曝压榨群演!工作11小时仅70元,剧方还威胁学生

萌神木木 浏览 149

大S带具俊晔新年露面,夫妻同框恩爱十足,大S瘦了很多

素素娱乐 浏览 2740

唱吧等39款APP被通报

第一财经资讯 浏览 121

TVB一线男星袁伟豪沦为男配角,因拍剧过度减肥,颜值断崖式下滑

娱乐白名单 浏览 2591

华为鸿蒙全新MPV曝光!车长5米2,比腾势D9豪华,你看好吗?

网上车市 浏览 2737

俄称挫败乌军空降行动

上观新闻 浏览 118

郑丽文"不谈统一"让人失望了 蔡正元的话一针见血

现代小青青慕慕 浏览 139

东风奕派eπ007,入门不到16万

懂车之道 浏览 2806

通航城市超260个 我国四大世界级机场群建设初具规模

央视财经 浏览 141
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
Copyright © 2020-2024,版权所有 xingchentong.com
沪ICP备20017958号-8