返回信息流
新闻事件
A重点80
Google DeepMind
2 个来源

Gemini Robotics 2 为机器人带来全身智能

谷歌DeepMind推出了Gemini Robotics 2,这是一种新型AI模型,使机器人能够利用全身智能执行复杂任务。该模型整合了视觉、语言和物理控制,让机器人能够更自然地理解和与环境互动。

SynthePulse Insight · AI 深度解读

Gemini Robotics 2:从指尖到全身,机器人智能的下一跳

版本 1 · 1 个来源

Google DeepMind 发布 Gemini Robotics 2 系列模型,首次实现人形机器人全身控制、五指灵巧操作和多机器人协作,但多指精细操作仍是挑战。

  • Gemini Robotics 2 是视觉-语言-动作模型(VLA),可控制人形机器人从脚趾到指尖的全身运动。
  • Gemini Robotics ER 2 是具身推理模型,支持多步骤任务规划、进度理解及多机器人协作。
  • Gemini Robotics On-Device 2 可在设备端本地运行,仅需数小时和不到200个示例即可适应全新机器人形态。
  • 在五指手上,模型可完成打结、密封拉链袋等精细操作,但多指灵巧操作的成功率仍较低。
  • 所有模型已面向早期合作伙伴开放,ER 2 模型可在 Google AI Studio 和 Gemini Enterprise Agent Platform 上使用。
展开章节目录全身智能:从桌面到真实空间

全身智能:从桌面到真实空间

此前模型仅控制人形机器人上半身完成桌面任务,Gemini Robotics 2 首次将控制扩展到全身。在 Apptronik Apollo 2 人形机器人上,模型能根据指令“把喷壶放到底层架子的绿色箱子里”,自主完成行走、抓取、放置等连贯动作。不过,DeepMind 承认机器人的移动速度仍有待提升。

该模型是 DeepMind 最先进的视觉-语言-动作模型(VLA),将视觉和语言输入直接转化为电机控制信号,可控制完整人形机器人及双臂机器人。同一模型权重可适配三种不同机器人形态:Apollo 2 搭配 SharpaWave 手或 Inspire 手,以及 Franka Duo 搭配 Robotiq 夹爪。

灵巧操作:五指与夹爪的精细度突破

Gemini Robotics 2 在多种末端执行器上实现了新的灵巧水平。在配备22自由度五指 SharpaWave 手的 Apollo 2 上,模型能完成打结、密封拉链袋等精细动作;在 Franka Duo 平台的标准二指平行夹爪上,也能执行紧密包装等复杂任务。

然而,多指灵巧操作仍是难点。官方图表显示,在五指任务上模型成功率较低,而全身控制和夹爪类任务达到中高成功率。DeepMind 表示将继续提升精度和速度,以接近人类灵巧水平。

推理与协作:多步骤任务与多机器人协同

Gemini Robotics ER 2 作为机器人的“高级大脑”,负责理解用户指令、观察环境、规划步骤,并与 VLA 模型协调执行。它能执行持续数分钟、包含数百次决策的复杂任务序列,并能自我纠错和泛化到新场景。

该模型还首次引入多机器人协作能力,不同类型机器人可相互通信、协同完成单个机器人无法完成的复杂工作流。ER 2 模型已上线 Google AI Studio,并在 Gemini Enterprise Agent Platform 提供私有预览。

本地化与快速适应:On-Device 模型的能力

Gemini Robotics On-Device 2 是专为本地运行优化的 VLA 模型,无需网络连接。它原生支持多形态,继承自 Gemini Robotics 1.5 的“运动迁移”技术,仅需数小时和不到200个示例即可适应全新的双臂机器人形态,包括形状、传感器和自由度差异极大的平台(如 Dexmate、SO101、Trossen)。

安全与责任:多层级保障

DeepMind 强调安全是机器人研究的基石。随着物理能力增强,他们采用多层方法,结合传统物理安全措施和稳健的 AI 安全框架,确保端到端安全与对齐。具体安全机制未在本文中详述。

可信度边界

本文信息全部来自 Google DeepMind 官方博客,属于第一方发布,事实可信度高。但所有性能数据(如成功率、适应时间)均为 DeepMind 自述,未经第三方独立验证。

核心结论

Gemini Robotics 2 在全身控制、灵巧操作和多机器人协作上取得显著进展,但多指精细操作仍是瓶颈。模型已开放给合作伙伴,标志着具身智能从实验室走向实际应用的重要一步。

主报道

Google DeepMind

主报道来源

同一事件报道

另有 1 个来源报道