NVIDIA 加速人形机器人发展(英伟达 机器人)
cac55 2024-09-27 07:04 30 浏览 0 评论
7 月 29 日,NVIDIA宣布为全球领先的机器人制造商、AI模型开发者和软件制造商提供一套服务、模型以及计算平台,以开发、训练和构建下一代人形机器人。
整套产品包括用于机器人仿真和学习的全新NVIDIA NIM微服务和框架、用于运行多阶段机器人工作负载的NVIDIA OSMO编排服务,以及支持AI和仿真的远程操作工作流,该工作流允许开发者使用少量人类演示数据来训练机器人。
NVIDIA创始人兼首席执行官黄仁勋表示:“AI 的下一波浪潮是机器人,其中最令人兴奋的发展之一是人形机器人。我们正在推进整个NVIDIA机器人堆栈的发展,面向全球人形机器人开发者和公司开放访问,让他们能够使用最符合其需求的平台、加速库和AI模型。”
借助 NVIDIA NIM 和 OSMO 加速开发
NIM微服务提供了由 NVIDIA 推理软件提供支持的预构建容器,使开发者能够将部署时间从数周缩短到几分钟。机器人专家将能够通过两项新的AI微服务,在NVIDIA Isaac Sim(基于 NVIDIA Omniverse平台构建的机器人仿真参考应用)中增强生成式物理AI仿真工作流。
MimicGen NIM微服务可根据Apple Vision Pro等空间计算设备记录的远程操作数据,生成合成运动数据。Robocasa NIM微服务可在OpenUSD(一个用于在 3D 世界中进行开发和协作的通用框架)中生成机器人任务和仿真就绪环境。
现已推出的NVIDIA OSMO是一项云原生托管服务,允许用户跨分布式计算资源来协调和扩展复杂的机器人开发工作流,无论是在本地还是在云端。
OSMO大大简化了机器人训练和仿真工作流,将部署和开发周期从数月缩短到一周内。用户可以对各种任务进行可视化管理,包括合成数据生成、模型训练、强化学习以及大规模的人形机器人、自主移动机器人和工业机械臂软件在环测试。
为人形机器人开发者提供先进的数据捕获工作流
训练人形机器人的基础模型需要大量的数据。远程操作是获取人类演示数据的方法之一,但这个过程正变得越来越昂贵和漫长。
通过在SIGGRAPH计算机图形大会上展示的NVIDIA AI和Omniverse远程操作参考工作流,研究者和 AI 开发者能够从极少量远程捕捉的人类演示中生成大量合成运动和感知数据。
首先,开发者使用Apple Vision Pro捕获少量远程操作演示,随后在NVIDIA Isaac Sim 中仿真这些录像,并使用MimicGen NIM微服务基于录像生成合成数据集。
开发者可以使用真实数据和合成数据对Project GR00T人形机器人基础模型进行训练,以节省时间和降低成本。然后,他们可以使用Isaac Lab中的Robocasa NIM微服务(一个机器人学习框架)来生成经验并重新训练机器人模型。在整个工作流中,NVIDIA OSMO 将计算任务无缝地分配给不同的资源,为开发者减少了数周的管理工作量。
通用机器人平台公司傅利叶看到了使用仿真技术综合生成训练数据的优势。傅利叶首席执行官Alex Gu表示:“人形机器人的开发极其复杂,这项工作需要从现实世界中繁琐地获取大量真实数据。NVIDIA 的全新仿真和生成式 AI 开发者工具将有助于引导和加速我们的模型开发工作流。”
扩大 NVIDIA 人形机器人开发者技术的访问渠道
NVIDIA 提供了三个计算平台来简化人形机器人的开发,分别是:用于训练模型的NVIDIA AI超级计算机;基于Omniverse构建的NVIDIA Isaac Sim,使机器人可以在仿真世界中学习和完善技能;以及用于运行模型的NVIDIA Jetson Thor人形机器人计算机。开发者可以根据具体需求来访问和使用全部平台或其中的任何部分。
通过新的NVIDIA人形机器人开发者计划,开发者可以提前获取这些新产品以及最新版本的NVIDIA Isaac Sim、NVIDIA Isaac Lab、Jetson Thor和Project GR00T通用人形机器人基础模型。
首批加入早期访问计划的企业有1x、波士顿动力公司、字节跳动ByteDance Research、Field AI、Figure、傅利叶、银河通用、逐际动力、Mentee、Neura Robotics、星动纪元和Skild AI。
波士顿动力公司首席技术官Aaron Saunders表示:“波士顿动力公司与 NVIDIA 在推动机器人技术发展方面有着悠久的密切合作历史。我们非常高兴看到这项工作的成果正在加速整个行业的发展。而要想获得最先进的技术,早期访问计划无疑是最佳的途径。”
相关推荐
- 「姓氏壁纸」“绚丽多彩”彩绘主题壁纸,让色彩照亮你的酷第一期
-
本期主题:“绚丽多彩”彩绘系列主题壁纸,让色彩照亮你的酷原创姓氏壁纸、屏保萌叔,带你你走一波,拿走不谢上期主题:“锦鲤转运”好运扎堆来系列主题壁纸本期姓氏:陈、董、冯、高、郭、韩、何、胡、黄、李、梁、...
- 50张爱国国庆主题精选作品+获奖优秀作品!黑白线稿可打印上色
-
图片来自网络,仅作分享,如有侵权请联系删除哦...
- Edge Canary最新版:新标签页可自定义颜色和主题
-
基于Chromium的Edge最新的Canary通道版本中,用户可以通过Flag手动启用新的新标签页自定义菜单,可以根据自己的偏好来选择颜色和主题。这项新功能最早由LeoVarel发现,这些Flag...
- 动物主题创意儿童画课程,线描和色彩的搭配,眼前一亮,太惊艳了
-
图片来自网络,仅作分享,如有侵权请联系删除哦!...
- 秋天的色彩,都藏在这些醉人诗词里
-
经典一刻【秋天的色彩,都藏在这些醉人诗词里】秋天是岁月精心构思出来的美妙华章,是色彩斑斓的季节。秋天可以有几种颜色呢?让我们一起抓住秋的尾巴,从诗词中找寻秋的颜色吧。声明:转载此文是出于传递更多信息...
- 这个颜色就是我的春季主题色啦!显白又显温柔,还有花式搭配
-
春日的暖意来啦,用一抹粉色系来衬托这个美好的春日吧。很糯的柔粉色可以放心穿一身,修身的H型版型让浅粉大衣有型之外更柔美,粉色条纹衬衣与深色圆领衫叠搭出层次感,再以粉色系点缀毛线帽和球鞋,俏皮活泼。还可...
- 色彩主题花境营造——紫色花境里的贵族气息!
-
紫色是一种高贵的颜色,通常象征雍容和华贵。紫色是红色和蓝色的混合色,尽管紫色并非十分引人注意,没有红色的热烈,蓝色的忧郁,但它是一种很有用的颜色,它能使人感觉舒适,并且与其他颜色搭配比较协调。紫色花范...
- 搭对主题色彩,装修才能fashion出新高度
-
本案例首先软装和硬装的颜色不搭,给人一种很陈旧的感觉,其次,卧室没有做整理,所以整体来说本案例不是一个成功的案例...
- 不折腾!Win10 竟然也有这么漂亮的主题
-
Windows10系统小淙已经用了6年,这种扁平化的设计也成了微软的风格。感觉也很适合小淙这种猛男。不过同一个界面看了6年,多少也有些审美疲劳了。遗憾的是Windows10系统只能修...
- No.337期香奈儿的《色彩的艺术》主题展
-
近日起至5月31日,享誉全球的国际顶级时尚品牌——香奈儿在上海来福士的香奈儿香水与美容品专门店举办《色彩的艺术》主题展。该展览通过全新甲油系列向JacksonPollock、PietMondria...
- 浪漫主题‖粉色系壁纸屏保背景图
-
...
- iPhone13“色彩+个性”主题手机壁纸
-
大家早安呐!美好的一天开始了![福气虎]![虎爪比心]!您各位觉得好看就帮忙点个赞!积极转发,关注我每天都有好的壁纸分享给您各位!...
- 主题样式-分支连线、颜色、线型、线宽,首端及末端
-
主题样式是指在图形天下思维导图软件中,用于定义思维导图主题外观的一套规则和设置,使其更加美观。其中在分支模块中,用户可以自定义分支连线、颜色、线型、线宽等属性。此外,用户还可以设置连线的首端和末端样式...
- 大胆的色彩主题,创意小公寓装修设计
-
如果你是个自在奔放的人,那么这套装修设计图绝对会适合你,不信,你看!怎么样啊,有没有被惊艳到?...
- 壁纸|IOS简约色彩渐变主题
-
...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- 如何绘制折线图 (52)
- javaabstract (48)
- 新浪微博头像 (53)
- grub4dos (66)
- s扫描器 (51)
- httpfile dll (48)
- ps实例教程 (55)
- taskmgr (51)
- s spline (61)
- vnc远程控制 (47)
- 数据丢失 (47)
- wbem (57)
- flac文件 (72)
- 网页制作基础教程 (53)
- 镜像文件刻录 (61)
- ug5 0软件免费下载 (78)
- debian下载 (53)
- ubuntu10 04 (60)
- web qq登录 (59)
- 笔记本变成无线路由 (52)
- flash player 11 4 (50)
- 右键菜单清理 (78)
- cuteftp 注册码 (57)
- ospf协议 (53)
- ms17 010 下载 (60)