MBZUAI 开源 PAN 2 世界模型 支持仿真推理
原标题:MBZUAI's Institute of Foundation Models (IFM) just released PAN 2, an open foundation world model fo...
78AI 研判分
MBZUAI 基础模型研究所发布开源基础世界模型 PAN 2,面向物理智能的仿真推理,让智能体在行动前先推演后果。它采用概念与感知双路推理:LLM 负责规划动作顺序与相机运动并转写为文本,29B 扩散模型从零训练将文本渲染为视觉画面。消融显示移除 LLM 后多步任务仅 8.7% 步骤正确且无完整计划,双路协同则达 75.1% 步骤正确、34.0% 计划完整完成。
报道正文
Rohan Paul (@rohanpaul_ai) · 2026-11-10 18
MBZUAI 的基础模型研究所(IFM)刚刚发布了 PAN 2,一个面向物理智能的开放基础世界模型。
它的构建目标是模拟式推理:让智能体在行动之前先推演会发生什么。
它支持两种推理方式,各自承担不同的职责:
概念推理:由 LLM 推断会发生什么、何时发生、相机如何移动,然后将其写成文本。 感知推理:一个从零训练的 29B 扩散模型,将这些文本转化为你所看到的画面。
去掉 LLM,多步任务就会崩溃:仅 8.7% 的步骤正确,没有任何计划能完成。把动作顺序搞对,是 LLM 的职责。
两者兼备时,PAN 2 的步骤正确率达到 75.1%,并能完整完成 34.0% 的计划,在 IFM 测试的模型中均为最高。每一个步骤都必须成立,计划才能成功。
更多细节见技术博客:
