NVIDIA 于 GTC 宣布通用人形机器人基础模型 GROOT N1 上市。这是世界上第一个开放给全球机器人开发团队的通用开源基础模型和推理训练模拟框架,可加速人形机器人开发技术。GR00T N1 为 NVIDIA 将预先训练并发布给全球机器人开发者团队的完全可自订模型当中的第一个。
NVIDIA 创办人黄仁勋表示全才机器人 (Generalist Robotics) 的时代已到来。借著 NVIDIA Isaac GR00T N1 基础模型和新的机器人数据学习框架,全球各地的机器人开发团队可加速开启未来 AI 机器人的新篇章。全才机器人顾名思义就是可以训练机器人做任何工作,把机器人变成个什么都会的人才,它可以是作业员也可以当家庭管家帮手,想得出的工作任务都可以让机器人执行。
Table of Contents
ToggleGR00T N1 双系统架构模型灵感来自人类认知理解模式
GR00T N1 基础模型采用双系统架构,灵感来自于人类认知理解模式。 「系统 1」是一种快思考的行动模型,反映了人类的反应或直觉,「系统 2」 是一种慢思考模型,用于深思熟虑、有条不紊地做出决策。
在这个视觉语言模型的框架中,系统 2 可以思考环境以及收到的指令规划行动。系统 1 基于人类演练数据和 NVIDIA Omniverse™ 平台产生的大量合成模拟资料对机器进行训练,将这些计划转化为精确连续性的机器人活动。
GR00T N1 可轻松执行常见工作任务,例如抓取动作、用一只或两只手臂移动物品,以及将物品从一只手臂转移到另一只手臂,或者执行在相同情境下的多步骤任务,可应用于材料处理、包装和检查等应用场景。开发人员和研究人员可以使用真实或模拟合成数据进行人形机器人后续训练。
在 GTC 主题演讲中,黄仁勋示范了 1X AI 的 NEO Gamma 人形机器人使用基于 GR00T N1 建构的后期训练执行管家任务,名为 NEO Gamma 的机器人自主功能为机器人新创公司 1x AI 和 NVIDIA 合作 AI 机器学习的成果。想像一个懒人窝在家中的场景,人类训练一个机器人管家帮忙打扫清洁或当厨房帮手做繁琐的家务杂事,自己慵懒的躺在沙发上听音乐,机器人管家可按个人需求进行训练,以人类的思考认知方式学习动作。

1X Technologies 执行长 Bernt Børnich 表示人形机器人的未来在于适应性和学习能力。NVIDIA 的 GR00T N1 大大提升了机器人的推理和技能,开发公司模型的同时,可利用 GR00T N1 的后期训练,以少量的数据,在 NEO Gamma 上进行了全面部署。
其他提前获得 GR00T N1 开发权限的人形机器人开发商包括 Agility Robotics、Boston Dynamics、Mentee Robotics 和 NEURA Robotics。
NVIDIA 与 Google DeepMind 和 Disney Research合作开发 Newton
NVIDIA 宣布与 Google DeepMind 和 Disney Research 合作开发开源硬体引擎 Newton,可让机器人学习如何更精确地处理复杂任务。
Newton 基于 NVIDIA Warp 框架构建,将机器人学习最佳化,并与 Google DeepMind 的 MuJoCo 和 NVIDIA Isaac™ Lab 等模拟框架相容。
Google DeepMind 和 NVIDIA 正合作开发 MuJoCo-Warp,预计将使机器人机器学习工作负载加速 70 倍以上,并将透过 Google DeepMind 的 MJX 开源程式库以及 Newton 提供给开发人员。

电影星际大战系列的机器人 BD1 在现实世界显形
Disney Research 成为首批使用 Newton 的公司,黄仁勋在 GTC 演讲中与他一起登台的机器人 BDX Droids 即是受 Star Wars 星战系列电影里的机器人角色 BD1 所启发。迪士尼幻想工程研发部高级副总裁 Kyle Laughlin 表示与辉达的合作使他们能创造出比以往更具吸引力的机器人角色,为开发团队催生出更具娱乐魅力的机器人工业设计,将机器人的外观设计和动作与辉达的技术结合。
NVIDIA Isaac GR00T 生成蓝图辅助机器人后期训练
高品质的数据工具对于开发机器人至关重要,但获取数据的成本很高。 NVIDIA Isaac GR00T 模拟操纵生成蓝图有助于解决这项挑战。蓝图基于 Omniverse 和 NVIDIA Cosmos Transfer 世界基础模型,可让开发人员透过少量人类演练产生大量操作任务用的模拟合成数据。NVIDIA 利用蓝图在 11 小时内就产生了 780,000 条合成轨迹,相当于连续九个月的人类演练数据。将合成数据与真实数据相结合与仅使用真实数据相比,NVIDIA 将 GR00T N1 的效能更可提高 40%。
NVIDIA 释出 GR00T N1 Open Physical AI Dataset 为开发者团队提供训练数据,开发者可在 Hugging Face 取得资讯。
风险提示
加密货币投资具有高度风险,其价格可能波动剧烈,您可能损失全部本金。请谨慎评估风险。
文章声明:以上内容(如有图片或视频亦包括在内)除非注明,否则均为谈天说币原创文章,转载或复制请以超链接形式并注明出处。