昆仑万维 WAIC 官宣“世界模型元年”:从“生成内容”到“理解物理世界”,AI 迎来关键转折

📅 2026/7/20 15:40:26
昆仑万维 WAIC 官宣“世界模型元年”:从“生成内容”到“理解物理世界”,AI 迎来关键转折
7 月 19 日正值 2026 世界人工智能大会WAIC期间昆仑万维“世界模型与多模态范式跃迁”专场论坛在上海西岸国际会展中心隆重举行。作为深耕 AI 科技领域的领军企业昆仑万维在这场论坛上宣布核心模型重磅升级——Matrix-Game 3.5 世界模型、Mureka v9.5 与 O3 音乐模型全面覆盖世界模型、AIGC 创作等前沿赛道。昆仑万维董事长兼 CEO 方汉在论坛上宣布2026 年为“世界模型元年” 标志着 AI 从内容生成走向对物理世界的理解与交互的关键转折。方汉2026 是“世界模型元年”三大产业预判锚定未来方向在论坛主旨演讲环节昆仑万维董事长兼 CEO 方汉正式宣布 2026 年为“世界模型元年” 。他指出过去两年 AI 行业的核心命题是“生成”——生成文字、图像、视频、音乐。而从 2026 年开始AI 的核心命题将转向“理解”与“交互”——让 AI 真正理解物理世界的运行规律并能与真实环境进行闭环互动。世界模型正是实现这一跨越的关键技术底座。昆仑万维董事长兼 CEO 方汉方汉在演讲中系统阐述了三大产业预判第一世界模型将走出屏幕进入物理世界。我们洞察到具身智能正从实验室走向真实环境这一趋势要求机器人在行动前先进行环境推演——预判动作后果、评估环境变化、及时调整应对策略。这种能力的突破将使竞争焦点从单一任务转向陌生环境下的通用模型能力谁能训练出在复杂场景中依然“看得懂、做得对”的模型谁就拿到物理智能时代的入场券这也是中国智能制造和机器人产业真正亟需的底层能力。第二游戏行业将率先被世界模型改变。开放世界游戏不再依赖数百人团队数年的手工搭建Matrix-Game 3.5 让虚拟世界随玩家行动实时生长、持续演化。未来三到五年世界模型将成为游戏行业的基础设施彻底刷新内容生产方式而国产模型已在这一赛道领跑全球。第三AI 音乐、AI 视频等工具将从技术试验变成大众创作工具促进 AIGC 的深层发展。Mureka 作为中国最强、全球前两名的音乐生成模型率先去除“AI 味”让普通人也能把模糊灵感转化为有情绪、有温度的作品。这并非替代音乐人而是大幅降低创作门槛让更多人的表达得以释放从而根本性改变音乐乃至整个 AIGC 产业的创作生态。三个产业预判背后是同一个方向让 AI 从“会生成”走向“懂世界”、“能行动”。方汉表示这不只是昆仑万维一家公司的回答更是中国 AI 从研发走向产业应用的一个缩影。AI 模型全球升级掀起全模态内容生成革命本次论坛上昆仑万维集中完成了核心模型的全球重磅升级。2.1 Matrix-Game 3.5Patch 级记忆注入重新定义交互世界模型作为昆仑万维世界模型系列的最新迭代Matrix-Game 3.5 在本次论坛上带来了革命性的技术升级。Skywork 首席科学家成宇在论坛上正式发布了 Matrix-Game 3.5 世界模型。Matrix-Game 3.5 聚焦可交互世界模型技术实现了 Patch 级别的记忆注入与系统级性能优化5B 模型在 720p 分辨率下可实现单卡 20FPS 实时生成具备 1 分钟记忆能力。Skywork 首席科学家成宇成宇指出世界模型是具身智能的“无限数据引擎”。传统数据采集面临人工成本高昂、实机采集耗时耗力、效率极低的痛点无法满足大模型规模化需求。Matrix-Game 3.5 构建了支撑下一代世界模型的无限数据生产体系突破传统瓶颈打造三条自动化数据生产管线输出 VideoPoseActionLanguage 的高质量训练数据目前已积累超 500 万高质量视频切片、超 1 万有效训练小时数、覆盖 1200 余个游戏场景。在技术架构上Matrix-Game 3.5 创新性地将历史帧切分为带有 3D 坐标的 Patch Memory通过 DepthPose Lift 到世界坐标系推理时根据当前相机视锥检索可见 Patch 并重新投影到当前视角形成 Mosaic再作为 Memory Token 注入 DiT实现长期一致性的 Patch 级空间记忆。这一设计将 Frame-level FOV Memory 升级为 Patch-level FOV Memory带来四大核心优势更准确的空间记忆检索与跨帧一致性、更稳定的相机运动生成、最大程度保留基座模型动态生成能力的 In-context Learning、以及用户可自由编辑记忆块的可控记忆能力。此外Matrix-Game 3.5 在推理加速层面实现了 DiT 推理与 VAE 解码的全链路优化通过“减少模型吞吐DiT 模型优化VAE 剪枝”三重手段达成单卡 20FPS 720p 实时推理的业界领先性能让高质量世界模型真正具备实时交互能力。Matrix-Game 从 1.0 到 3.5 始终坚持开源路线。3.5 版本宣布核心架构开源吸引全球开发者共建生态。Matrix-Game 2.0 是实时交互式世界模型技术范式中首个开源的实现方案Matrix-Game 3.0 则首次系统性地将记忆问题纳入开源解决方案。此前DiT 作者、纽约大学助理教授谢赛宁团队基于 Matrix-Game 2.0 的开源底座发布了全球首个多人视频世界模型 Solaris也从学术圈的实际使用上印证了这套开源方案的基础模型价值。NVIDIA 和浙大联合发布的工作 Light Interaction 基于 Matrix-Game 3.0 模型进行研发。另外NVIDIA 的 SANA-WM 和 Adobe 的 RELIC 等国际头部大厂世界模型均将 Matrix-Game 相关模型作为对比基准。Matrix-Game 3.5 开源地址https://github.com/Riemann-Dynamics/Matrix-Game-3.52.2. Mureka v9.5 与 O3最没有 AI 味的 AI 音乐模型让音乐进入“版本化制作”时代Mureka v9.5O3 音乐大模型的发布成为本次论坛最具情感冲击力的时刻之一。从 SkyMusic 1.0 内测到 Mureka v9.5O3昆仑万维的音乐模型走过了一条从“作品成立”到“创作可控”再到“多模态创作”的演进路径。而 v9.5 版本首次喊出 “最没有 AI 味的 AI 音乐模型” 这一口号——它不再依赖声部堆砌和复杂编配制造“厉害”的第一印象而是在真实的音乐框架中以更为克制的方式处理编配、人声、情绪与 Prompt 意图让音乐表达更自然、更真诚。O3 建立在新版 V9.5 之上并通过 test-time scaling 扩展 MusiCoT 的推理过程。它不是简单地“生成得更多”或“想得更久”而是让模型在生成过程中持续审视当前表达局部旋律是否仍服务全曲目标编配是否遮蔽人声情绪是否提前透支结构是否正在偏离最初意图。额外推理空间被用于回看偏差与自我修正使音乐 CoT 能够逐步收敛而不是一次决定后一路向前。歌曲的主观评分从评测结果看V9.5 沿着 MusiCoT 路线完成了更扎实的底座升级旋律、人声、音质和编曲全面提升指令精准度从 6.92 提升至 7.62。它不再把“更满、更复杂”当作唯一标准而是在真实音乐框架中更克制地处理编配、人声、情绪和 Prompt 意图让歌曲更自然、更真诚。O3 则建立在 V9.5 之上通过持续推演、回看偏差和修正后续决策进一步强化旋律发展、编曲结构与指令理解使歌曲结构更完整、情绪更连贯、段落关系更合理。简单来说V9.5 负责把歌做得更自然O3 负责让模型在交付前多看、多想、多修一遍。今天一首歌经常和视频一起被消费。短视频、游戏、影视预告、品牌片和虚拟人演出都需要声音与画面共同表达。Mureka 这次重磅升级也把音乐与视频 MV 接进了同一条创作链路。用户可以从一张图、一段视频或 moodboard 开始让系统理解画面的节奏、人物、空间和情绪再生成与之匹配的音乐当然也可以从一首歌开始让 Agent 理解歌词叙事、节拍编曲和情绪起伏继续生成角色与 MV 的视觉方案。歌词决定叙事、节拍决定剪辑、旋律决定记忆点、画面决定传播场景。Agent 要做的是让这些信息在同一个创作目标下持续传递而不是把几个生成工具简单拼在一起。更为重要的是Mureka 已从单一的音乐生成工具演进为完整的“版本化制作”平台。其差异不仅来自模型效果更来自“模型训练—推理时选优—版本化创作工具—平台分发”的系统组合。同一创意可快速生成多版本支持在旋律、人声、结构等维度进行局部保留与替换Studio 将“操作 DAW”转化为“指挥创作”降低门槛、抬高上限。同时Mureka 推出 Character 功能——一段声音、一张照片即可生成专属歌手角色并贯穿歌曲、MV 全链路AI 配乐能自动分析视频画面的场景、动作与情绪创作更贴合内容的音乐Mureka Agent 则通过自然语言一次对话调用整曲生成、单轨生成、Remix、延伸、MIDI 导出、声音克隆等全部能力全程无需切换界面。正如昆仑万维所提出的愿景AI 音乐不再是简单的消费内容而是升级为一种自我表达的语言。用户不仅是被动聆听者更是主动表达者与参与者。Mureka 正以模型能力、创作工具与平台分发的完整闭环重新定义 AI 时代的音乐创作生态让每个普通人的灵感都能有温度地落地从“一个想法”到“歌词—人声—角色—歌曲—MV”的完整创作链路全面释放 AIGC 的深层创作力。院士与行业领袖齐聚共话世界模型未来本次论坛还邀请了多位重量级嘉宾。中国科学院院士、南京大学教授、副校长周志华受邀发表主旨演讲围绕世界模型的前沿方向展开了深度分享。此外我们邀请了黎曼动力机器人创始人刘扬教授和 Reactor Technologies, Inc. CEO 兼联合创始人 Alberto Taiuti 分别介绍了黎曼机器人模型 1.0 版和 Reactor 加速世界模型在全球落地的经验。中国科学院院士、南京大学教授、副校长周志华中国科学院院士、南京大学副校长周志华教授在题为《关于世界模型的讨论》的主旨演讲中将世界模型划分为感知层、理解层与决策层并着重指出决策层世界模型长期面临“多步推演复合误差平方级放大”与“样本复杂度过高”两大理论瓶颈。他分享了团队的最新突破通过分布匹配技术可将推演误差从平方级压至线性级验证了长序列推演的可行性。同时通过创新性地逆向运用贝尔曼方程将所需样本量降至原来的根号 T 分之一为在战斗机操控、智能工厂等代价高昂的现实任务中构建决策世界模型提供了理论基础。他还提出“学件”概念——由模型与 AI 自动生成的“规约”共同构成允许多个异构模型在不公开数据的前提下进行复用与组装为世界模型从单产线定制走向可成长、可演化的模型生态开辟了新路径。黎曼动力机器人创始人刘扬教授黎曼动力机器人近期推出的 Riemann-1.0是其成立以来首个公开发布的成果——面向 Physical AI 的新一代 Embodied World Action Model。该模型基于超过 23.2 万小时多源具身交互数据训练统一融合第一视角人类视频、UMI 示教与异构机器人轨迹并提出全因果世界动作建模架构与三阶段渐进式具身预训练框架。Riemann-1.0 不再停留于仿真环境中的离线评估而是在多个国际主流机器人 Benchmark 与真实机器人任务上同步实现仿真与真机双 SOTA为机器人操作、实时自适应控制及高频人机协作等 Physical AI 场景提供了从“理解世界”到“干预世界”的生成式行动基础设施。真机评测四大家居任务全面领先Reactor Technologies, Inc. CEO 兼联合创始人 Alberto Taiuti 则从产业落地角度指出世界模型已从静态、高延迟、无状态的媒体生成范式跃迁至有状态、实时交互、具备因果逻辑的新范式。他强调世界模型不再只是生成视频或图像而是能够持续推演环境变化并支持双向人机交互的“生成式软件”雏形。他以公司同名平台“Reactor”为例展示了为世界模型原生设计的开发者基础设施如何在保持极低延迟与流式传输的同时支持机器人、游戏、仿真等高频交互场景。Reactor Technologies, Inc. CEO 兼联合创始人 Alberto Taiuti在具身智能对谈环节黎曼动力机器人创始人刘扬与破壳机器人创始人、清华大学交叉信息研究院助理教授许华哲围绕“具身世界模型的 ChatGPT 时刻”展开深度对话探讨了世界模型与 VLA 的边界、机器人通用世界模型的训练瓶颈、具身智能的 Scaling Law 以及家庭机器人 PMF 等核心议题。全模态内容革命AI 重塑视频、游戏、音乐与全球文娱论坛压轴环节举行了“全模态内容革命——AI 重塑视频、游戏、音乐与全球文娱”圆桌对话由甲子光年创始人张一甲主持。昆仑万维董事长兼 CEO 方汉中国电影家协会副主席黄晓明演员王珞丹爱奇艺高级副总裁杨海涛青年导演崔睿共同参与。从左至右分别为甲子光年创始人张一甲昆仑万维董事长兼 CEO 方汉中国电影家协会副主席黄晓明演员王珞丹爱奇艺高级副总裁杨海涛青年导演崔睿圆桌围绕 AI 与文娱产业的深度融合展开讨论从演员和导演的 AI 创作初体验到 AI 演员与真人创作者的价值博弈从 AI 重构平台内容生态到全模态 AI 重塑文娱赛道终局。嘉宾们一致认为AI 是文娱行业最好的工具与最大的革新者而人类创作者永远是内容的灵魂缔造者人机协同将成为全球文娱行业的新发展范式。王珞丹以亲身体验道出 AI 创作的“痛并快乐着”——为求一个理想镜头熬夜抽卡至凌晨四点反复调整提示词却迟迟得不到想要的画面直到清晨才终于抽到满意的镜头。她坦言自己作为“小白”创作者从分镜、数字资产到人物设定一步步摸索在这个过程中请朋友帮忙才得以完成。她认为创作者首先是一个判断者和决策者需要用审美去筛选和决定最终呈现的画面而 AI 能带来超出想象的运镜和流动性。她相信观众在意的是故事能否打动人心而非媒介形态创作者始终是表达的核心。黄晓明提到自己曾看了一部朋友制作的 AI 电影三个月前看时还能明显看出 AI 表演的痕迹但最近再看时即便被告知那是 AI 生成他已经完全分辨不出来了“细节到脸上的斑点毛孔甚至微表情、毛孔都在演戏”——这种指数级的技术迭代让他真的惊到了。AI 不仅改变了他的创作方式也融入了他的日常体验——他今天用 Mureka 生成了两首歌效果很不错“我很喜欢杨宗纬的风格就让 Mureka 照着《空白格》生了一首抒情的歌词还挺触动人心的。”从创作到投资他对 AI 保持高度开放态度明确表示很想去投资一些 AI 相关的项目——无论是科技方向还是影视方向。崔睿指出AI 已在实际创作中显著提升了前期故事板的制作效率让导演能以更低成本、更短时间完成视觉预演后期阶段AI 还能有效补足因天气等客观因素无法实拍的镜头缺失。在他看来AI 在影视制作中最能发挥价值的场景恰恰是那些人力成本最高、执行最繁琐的“技术难题”——比如需要成千上万群演的大场面这正是 AI 最擅长解决的领域。提及昆仑万维的 AI 视频模型 SkyReels他认为一致性非常突出——能有效解决创作者最头疼的“抽卡”效率问题在系列化制作中保持人物、物体的稳定统一避免反复尝试的无效劳动同时音画同步能力也值得肯定。整体来看他认为 AI 视频工具值得创作者去尝试和使用。杨海涛从平台数据出发透露爱奇艺后台每日收到超 3000 部 AI 短剧与上千部 AI 漫画AI 内容观看数据持续提升。他以爱奇艺燎原计划扶持的网络电影《勿念》为例AI 在电影镜头特效制作方面实现超 50%的提效从导演构思到成片可节约三周以上的时间他预计暑期将上线更多 AI 参与的网络故事片。方汉作为技术方表态承诺将持续降低创作门槛与 Token 成本实现人人如龙的文化平权。他坦言技术上的难点并非大场面、爆炸等传统拍摄中昂贵的镜头反而是小众场景数据量不足导致效果不佳同时解释 AI 生成人像塑料感的来源是扩散模型的去噪机制将所有面孔平均化因此让模型更真实是所有从业者的共同目标。他预测后 AI 时代演员需学导演、导演需学表演角色边界将日益模糊。所有嘉宾共同指向一个共识AI 不会消解人的创造力反而倒逼创作者更珍视自身的独特体验与情感表达在技术赋能下回归内容的本真。从“生成内容”到“理解物理世界”昆仑万维的下一个十年从 2022 年“All in AGI 与 AIGC”战略确立到 2026 年“世界模型元年”的正式宣告昆仑万维完成了从全模态内容生成到可交互世界模型的关键跃迁。在世界模型和 AIGC 方向上昆仑万维交出了全球领先的答卷。2026 年昆仑万维正以世界模型为支点撬动 AGI 时代的下一场多模态范式革命。世界模型元年未来已来。