百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

让 AI “穿针引线”:在仿真中训练手术机器人

cac55 2024-09-27 07:04 19 浏览 0 评论

利用 NVIDIA Isaac Sim 和 NVIDIA Omniverse 开发的 ORBIT-Surgical 正在 ICRA 机器人大会上展出。

NVIDIA 与学术研究人员正在联合开发用于手术的机器人。

ORBIT-Surgical 是一个由多伦多大学、加州大学伯克利分校、苏黎世联邦理工学院、佐治亚理工学院和 NVIDIA 研究人员共同开发的机器人训练仿真框架。它所训练的机器人可以在提升手术团队技术水平的同时,减轻外科医生的认知负荷。

该框架支持十多种操作,这些操作灵感来源于腹腔镜手术(又称微创手术)训练课程,例如抓取针头等小物件、将它们从一只机械臂传递到另一只,并高度精准地放置针头等。

这个基于物理学的框架是使用 NVIDIA Isaac Sim(一个用于设计、训练和测试 AI 机器人的仿真平台)构建而成的。研究人员在 NVIDIA GPU 上训练了强化学习和仿真学习算法,并使用 NVIDIA Omniverse(一个用于开发和部署基于通用场景描述 OpenUSD 的高级 3D 应用程序和管线的平台)进行逼真的渲染。

在下面的视频中,ORBIT-Surgical 研究团队演示了如何在实验室环境中将仿真训练中的数字孪生移植到实体机器人上。该团队使用的是由机器人手术领导者 Intuitive Surgical 支持的非营利组织 Intuitive Foundation 所提供的社群支持型“达芬奇”研究套件。


AI 以一抵九

ORBIT-Surgical 的基础是 Isaac Orbit,这是一个基于 Isaac Sim 构建的模块化机器人学习框架。Orbit 支持各种用于强化学习和仿真学习的程序库,可以让 AI 智能体进行模拟真实专家示例的训练。

借助该手术框架,开发者能够利用在 NVIDIA RTX GPU 上运行的强化学习和仿真学习框架训练像“达芬奇”研究套件机器人(dVRK)这样的机器人,来操纵刚性和柔性物体。

阅读 ORBIT-Surgical 所依据的论文

https://arxiv.org/pdf/2404.16027

进一步了解 NVIDIA 在 ICRA 上发表的论文

https://developer.nvidia.com/blog/nvidia-presents-new-robotics-research-on-geometric-fabrics-surgical-robots-and-more-at-icra/

全文请查看:

https://mp.weixin.qq.com/s/w5mFroXm3PlkBqkJ2CKtLA

相关推荐

iphone6自定义铃声设置流程(iphone6怎么自定义来电铃声)

苹果iphone6自定义铃声如何设置,iphone6自定义铃声怎么设置,iphone6自定义铃声设置教程,下面小编给大家分享一下。设置自定义铃声首先要自己制作或者找到一个铃声音频。1、在电脑上面把已经...

iphone手机三分钟更换铃声,无需电脑直接手机操作

iPhone怎么在手机上换铃声?无需电脑!1分钟教你给苹果手机换铃声众所周知,苹果手机的ios系统是比较封闭的,封闭系统就会给我们带来一些不便,这里要说的就是苹果手机更换个性化铃声就比较麻烦,因为io...

iPhone手机个性铃声设置详细教程(iphone个性铃声怎么设置)

iPhone现在已成街机了。朋友聚在一起的时候,是不是总有种以为是自己手机响了的赶脚。那么,小编今天跟大家分享一下iPhone怎么换铃声?,让你轻松设置属于你的个性铃声。1:电脑端安装iTools,安...

iPhone也能用自己喜欢的铃声了,2分钟包搞定!

听到超好听的铃声,怎样才能放进iPhone里?这貌似是一道千古难题。90%的iPhone小白:听到这么爽脆带感的iPhone铃声,我要用!我要用!我要用!视频然而打开iTunes发现,脑子一片空白……...

苹果iOS 26隐藏新铃声曝光:强调“玻璃质感”

IT之家6月20日消息,苹果在iOS26中隐藏了一个新的铃声,这是现有默认铃声“Reflection”的改版。“Reflection”自2017年iPhoneX问世以来一直是系...

苹果ios14充电提示音怎么设置 iPhone手机修改充电提示音教程

ios14充电提示音最近很火爆,大家都想要知道苹果设置充电提示音的方法,个性化的设置非常吸引大家,小编也会在这里教大家ios14苹果充电提示音的设置,操作的流程会直接分享在下方,各位玩家们都能一起来看...

苹果iphone手机直接设置铃声教程(ios怎么直接设置铃声)

iPhone苹果16自定义来电铃声攻略(ios自定义铃声怎么设置)

在智能手机的个性化设置中,更改来电铃声是展现自我风格的一种方式。对于使用iPhone苹果16的用户来说,设置一个独特的来电铃声,不仅能提升接听体验,还能让日常生活更加多彩。以下是如何为iPhone苹果...

未越狱iPhone用户自定义来电铃声和短信铃声的教程

其实自定义来电铃声和短信铃声的过程没有什么区别,但要注意,来电铃声的播放时间不能超过40秒,短信铃声的播放时间不能超过30秒,这也就是说长度为30-40秒的仅在iPhone的来电铃声中出现,少于30秒...

苹果手机怎么设置闹钟铃声?更改为歌曲铃声,亲测有效

很不是有很多小伙伴每天早上都被苹果手机刺耳的“雷达”闹钟铃声给吵醒呢?想要更换一个舒缓的闹钟铃声,却发现自己鼓捣半天却无法更换喜欢的歌曲闹钟铃声。苹果手机怎么设置闹钟铃声?下面小编就来分享如何将苹果手...

独家教程:iPhone手机铃声制作与更换,一般人我不告诉他

今天刚好自己作铃声。。想到吧里好多人都会问怎么制作铃声。于是顺便截图发吧里。虽然百度一下铃声制作已经泛滥。但是还是会一直有小白问。所以这里会详细图文说明。先介绍小白式铃声制作。http://www....

苹果用户iTunes自制自定义铃声教程

怎么制作iphone6铃声,如何使用iTunes剪切音乐自制铃声,新版iTunes怎么自制铃声,相信很多苹果用户都想使用一些个性化铃声。那么就学习一下这个方法吧。1、在电脑上面打开iTunes,选择编...

轻松学会!苹果手机怎么设置铃声来电铃声(3个方法)

在日常生活中,手机的铃声扮演着非常重要的角色,不仅是接收来电的提示,更是展示个人品位和风格的方式之一。而对于苹果手机用户来说,定制来电铃声可以让手机更具个性化,并且让您在繁忙的环境中更容易识别重要的来...

iPhone13怎么设置来电铃声?苹果13自定义铃声操作教程

我们知道,苹果iOS系统是相对封闭的,在很多功能设置上与安卓机大有不同。就如来电铃声,很多苹果用户就不喜欢使用默认的那些来电铃声,想要自定义铃声,却不知如何操作。最近,新购入iPhone13系列机型的...

iPhone 免费铃声:iOS 26 终于让设置变得更简单

苹果终于开窍了——省去了最烦人的繁琐步骤。iOS26终结了多年来困扰iPhone用户的麻烦操作:现在无需通过GarageBand应用,仅需轻点几下就能设置自定义铃声。完全免费、直接操作且极...

取消回复欢迎 发表评论: