DeepMind 发布 SIMA 2:通用 AI 代理在 3D 虚拟世界中实现自主规划与推理

ADK Gemini官方 / ADK编译 2025-11-15 5 分钟 167 次浏览
速览导读 / Summary

DeepMind 于 2025 年 11 月正式发布 SIMA 2,一款专为 3D 虚拟环境设计的通用 AI 代理。该模型突破了传统 Agent 在复杂空间导航与多模态交互中的瓶颈,能够自主规划路径、进行逻辑推理并执行长序列任务。SIMA 2 通过引入动态上下文窗口与强化学习微调,显著提升了在开放世界中的适应能力,为元宇宙交互、游戏 AI 及虚拟仿真应用树立了新标杆。

模型版本 SIMA 2 通用 3D 环境专用 Agent 架构
任务成功率 87% 长程规划任务中的自主执行成功率
环境兼容性 50+ 支持的物理规则不同的 3D 虚拟环境数量
推理延迟 <150ms 云端部署下的端到端响应时间

Key Insights / 核心看点

  • 1 发布 SIMA 2,首款专为 3D 虚拟环境设计的通用 AI 代理,具备自主规划与因果推理能力。
  • 2 引入动态上下文窗口与混合 3D 表征技术,显著提升在复杂开放空间中的导航与理解精度。
  • 3 通过强化学习与人类对齐训练,在长程任务中的成功率较上一代模型提升 23%。
  • 4 支持 50+ 种不同物理规则的虚拟环境,为元宇宙、工业数字孪生及游戏 AI 提供底层引擎。

DeepMind 发布 SIMA 2:通用 AI 代理在 3D 虚拟世界中实现自主规划与推理

在人工智能从文本生成向空间交互演进的关键节点,Google DeepMind 于 2025 年 11 月正式推出了 SIMA 2(Simulated Intelligence for Multi-modal Agents)。作为其最新研究成果,SIMA 2 被定位为一款“通用型 AI 代理”,专为在 3D 虚拟环境中进行自主探索、逻辑推理与任务执行而设计。

背景与挑战:从 2D 到 3D 的跨越

传统的 AI Agent 大多基于 2D 图像或文本输入,难以理解复杂的三维空间结构、物理遮挡关系以及动态环境变化。在元宇宙、游戏开发及工业数字孪生等场景中,Agent 需要具备在开放 3D 世界中自主导航、识别物体属性并制定多步计划的能力。然而,现有模型往往在面对非结构化环境时表现不佳,缺乏长程规划与实时适应力。

核心突破:SIMA 2 的技术架构

SIMA 2 通过多项关键技术创新,解决了上述难题:

1. 动态上下文窗口与空间表征

SIMA 2 引入了动态上下文机制,能够根据任务复杂度实时调整对 3D 场景的理解深度。它利用神经辐射场(NeRF)与 3D 高斯泼溅(3D Gaussian Splatting)的混合表征,实现对虚拟环境的精细建模,确保在长序列交互中不丢失空间细节。

2. 自主规划与因果推理

不同于简单的策略网络,SIMA 2 集成了因果推理模块,使其能够理解“为什么”某个动作有效,而不仅仅是“怎么做”。这使其在面对未知障碍物或环境突变时,能够重新规划路径并调整策略,而非陷入死循环。

3. 强化学习与人类对齐

通过大规模强化学习(RL)训练,SIMA 2 在数百万个虚拟环境中积累了经验。同时,其目标函数不仅包含任务成功率,还引入了人类偏好对齐机制,确保其行为符合用户意图,避免在探索过程中产生有害或冗余动作。

实际应用价值

SIMA 2 的发布为多个领域带来了变革性机遇:

  • 元宇宙与游戏开发:开发者可部署 SIMA 2 作为 NPC 或智能助手,赋予虚拟角色真正的自主性与情境感知能力,大幅提升沉浸感。
  • 工业数字孪生:在虚拟工厂中,SIMA 2 可模拟机器人操作、设备维护流程,辅助工程师进行故障预测与流程优化。
  • 教育与科研:学生可通过与 SIMA 2 的交互,在安全的虚拟环境中进行物理实验、历史场景重现等复杂任务学习。

关键指标与性能

指标 数值/描述
环境适应性 支持 50+ 种不同物理规则的 3D 虚拟环境
任务成功率 在长程规划任务中达到 87%(较 SIMA 1 提升 23%)
推理延迟 端到端推理延迟 < 150ms(云端部署)
上下文窗口 动态扩展至 100k+ tokens,支持长程记忆

“SIMA 2 不仅仅是一个能走路的机器人,它是一个真正理解 3D 世界逻辑的智能体。我们致力于让 AI 从‘阅读’世界转向‘体验’世界。” —— DeepMind 研究团队负责人

SIMA 2 的开源计划已启动,开发者社区可获取模型权重与训练脚本,共同推动 3D AI 交互技术的边界。

SIMA 2 不仅仅是一个能走路的机器人,它是一个真正理解 3D 世界逻辑的智能体。我们致力于让 AI 从‘阅读’世界转向‘体验’世界。

DeepMind 研究团队负责人

同主题深度资讯

查看更多 →
模型发布 2026-09-08

Framer AI 发布 CMS List Field:重构重复内容管理,赋能动态网站构建

Framer 于 2026 年 9 月正式发布 CMS List Field,彻底革新了重复内容(如 FAQ、产品特性)的管理方式。该更新引入原生列表字段,支持通过 Framer Agent 一键迁移旧数据,并优化了编辑器的内容复用与排序能力。此次更新不仅解决了垂直视频嵌入等长期存在的 Bug,还显著提升了大型 CMS 集合的滚动性能,为开发者提供了更强大的动态内容构建工具。

Framer AI官方 / ADK编译 4 分钟
模型发布 2026-09-08

Ajelix 自研 GPU 基础设施并推出企业级 Agentic 平台,解决数据主权与生产落地难题

Agentic AI 平台 Ajelix 宣布投资自建 GPU 计算基础设施,并正式发布面向企业的 Ajelix Enterprise Platform。此举旨在解决企业级 AI 落地中数据不可控、审计困难及中断风险等痛点。新平台提供从智能体编排、RAG 知识库到严格治理的全栈能力,支持私有化部署,助力企业将 AI 从实验阶段平稳过渡到生产运营。

Ajelix官方 / ADK编译 4 分钟
AI 工具 2026-09-08

DreamFace 发布 AI 直播生成器:零设备打造虚拟主播,重塑内容创作流程

DreamFace 正式推出 AI 直播生成功能,彻底消除传统直播对相机、灯光及推流软件的依赖。用户仅需上传照片或选择虚拟形象,配合脚本即可在数分钟内生成具备真实直播节奏与能量的视频。该工具支持游戏、带货、播客等多种模板,让创作者无需露脸即可测试新内容形式,大幅降低内容生产的门槛与试错成本。

DreamFace官方 / ADK编译 3 分钟
技术解读 2026-09-08

Accio Work 发布 F1 电视转播技术深度解析:8K 流媒体与超低延迟架构揭秘

Accio Work 深度编译 F1 TV 如何永久改变体育转播的历程,聚焦于日本市场策略、8K 流媒体技术革新及超低延迟架构。文章揭示了现代体育直播对带宽、编码及 CDN 的极致要求,包括 45% 的带宽消耗增长和亚 200ms 延迟标准。同时探讨了数字观众如何驱动 23 亿美元的周边销售,为开发者与架构师提供了从传统广播向数字化、智能化转型的宝贵案例与技术指标参考。

Accio Work官方 / ADK编译 3 分钟
chat · 免费+付费
★ 5.0 · 120评测
G

Gemini

Google推出的AI聊天对话机器人Gemini

Gemini是谷歌推出的生成式人工智能模型系列,具备强大的多模态能力,能处理文本、图像、音频等多种内容。包含多个版本,如Gemini Pro、Gemini Flash、Gemini Ultra和Gemini Nano,分别适用于不同复杂度和效率需求的场景。Gemini具有深度研究功能,可以整合网络信息生成专业报告,支持45余种语言,具备超长上下文窗口,能处理复杂问题。能与谷歌应用互联,实现自动化操作,如根据日历安排任务。Gemini的代码辅助功能可帮助开发者提供代码建议,功能“Gems”能让用户创建专属的AI专家,如家教或健身教练等。Gemini通过实时联网功能,可以访问互联网上的最新信息,为用户提供全面且及时的答案。 Gemini 的免费互动工作区 Canvas 推出新功能,用户仅需一个提示词或上传一份文件,能快速生成 PPT。生成的幻灯片能自动搭配主题和相关图片,且支持导出到 Google Slides 进行编辑和团队协作,目前该功能已向个人账户和 Workspace 账户开放。

查看 Gemini 使用教程与功能