百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

利用 NVIDIA Isaac Sim 创建虚拟环境进行仿真开发与测试

cac55 2024-09-27 07:05 29 浏览 0 评论

除了做汉堡或端咖啡外,机器人还可以在仓库中搬运货物、包装食品和帮忙装配车辆。它们如何在很短的时间内达到熟练水平呢?

这就要归功于机器人仿真了。


在上一篇文章中我们学习了进行机器人开发的第一步——生成合成数据然后进行训练点击此处跳转。从 0 到 1 搭建机器人系列文章第二篇将带领大家继续学习如何创建虚拟环境,进行机器人的仿真开发与测试。本次要使用的工具是 NVIDIA Isaac Sim?,一款可扩展的机器人仿真应用程序和合成数据生成工具。



什么是机器人仿真?

仿真的具体过程是:首先使用仿真器将虚拟机器人置于虚拟环境中,这样就可以在不需要实体机器人的情况下测试机器人的软件。最新的机器人仿真器可以生成数据集,用于训练将在实体机器人上运行的机器学习模型。


然后,在这个虚拟环境中,开发人员可以创建机器人、环境以及可能需要的其他实体的数字版本。虚拟环境也会遵守物理定律,并模拟现实世界的重力、摩擦、材料和照明条件。


仿真一般被用于验证、确认和优化机器人的设计和系统及其算法。仿真能够在建造或改造开始前对设施进行优化,以提高效率,同时有助于减少昂贵的制造变更。


为了让机器人能够在人群中安全地工作,完美的运动规划是必不可少的。若要搬运脆弱的物体,机器人需要能够执行精准的接触和抓取。这些机器以及自主移动机器人和自动驾驶汽车系统,都是在大量数据的基础上训练出安全的运动方式。

仿真正在利用合成数据实现以前不可能实现的虚拟进展。今天在仿真中诞生和成长的机器人,将被用于解决现实世界中的各种问题。



机器人仿真的工作原理

先进的机器人仿真器从应用基本的物理学方程开始,比如使用牛顿运动定律,确定物体如何在一个小的时间增量或一个时间段内移动。还可以加入对机器人的物理限制,比如加入一个铰链式关节或者使其不能通过其他物体。


仿真器使用各种方法来检测物体之间可能发生的碰撞、识别碰撞物体之间的接触点,并计算力或脉冲,以防止物体之间相互碰撞。仿真器还可以计算用户需要的传感器信号,比如机器人关节处的扭矩或机器人抓手与物体之间的力。


使用机器人仿真的过程中,用户通常会导入机器人的计算机辅助设计模型,并导入或生成感兴趣的目标对象来构建一个虚拟场景。开发人员可以使用一套算法执行任务规划和运动规划,然后规定控制信号来执行这些计划。这使机器人能够以特定的方式执行任务并移动,比如拿起一个物体并将其放到目标位置。


开发人员可以观察计划输出的结果控制信号,然后根据需要修改它们以确保成功。近日,人们开始使用基于机器学习的方法。用户不必直接规定控制信号,而是只需要规定一个期望的行为,比如在不发生碰撞的情况下移动到一个位置。这时,一个由数据驱动的算法会根据机器人的仿真传感器信号生成控制信号。


此类算法包括模仿学习和强化学习,前者以人类示范作为参考,后者让机器人通过智能试错学会行为,依靠经过加速的虚拟体验迅速完成多年的学习。


然后,仿真器将按照用户要求的时间间隔重复这一过程。一些仿真器,比如建立在 NVIDIA Omniverse? 上的应用 NVIDIA Isaac Sim 等还可以按照间隔时间,提供其输出结果的精确物理学可视化图表。



使用 NVIDIA Isaac Sim 进行仿真

NVIDIA Omniverse Cloud 平台上的 Isaac Sim 是一个机器人仿真应用和 SDG 工具,驱动逼真的、物理准确的虚拟环境。在 NVIDIA Omniverse 的赋能下,Isaac Sim 使分布在全球的团队能够开展远程协作,一起构建、训练、仿真、验证和部署机器人。

前文提到,仿真利用合成数据以推动虚拟化世界的进程,而合成数据离不开另一助力:NVIDIA Omniverse Replicator,一款可扩展的高级 SDK,使开发者能够生成物理精准的 3D 合成数据,并轻松构建自定义合成数据生成 (SDG) 工具,以提高感知网络的训练速度和准确性。真实世界中的数据是昂贵、需要人工标记的,容易出错且不完整,而 Omniverse Replicator 扩展了这些数据,这一引擎能够创建大量、多样化的精确物理数据,以满足机器人开发者的需求。


此外,Isaac Sim 具备人员模拟功能,可将人类角色添加到仓库或生产设施中,并让他们执行堆放包裹、推送小车等常见的任务。目前支持许多常见的行为,模拟这些行为就像发布命令一样简单。


为了最大程度地减少在模拟世界中观察到的结果与在真实世界中看到的结果之间的差距,必须要有符合物理学的传感器模型。凭借 NVIDIA RTX? 技术,Isaac Sim 可以实时渲染来自传感器的符合物理学的数据。在使用 RTX 模拟激光雷达时,光线追踪可以在各种照明条件下,或者在对反射材料做出反应时提供更加准确的传感器数据。

Isaac Sim 还提供了许多新的可模拟 3D 资产,这对于建立符合物理学的模拟环境至关重要。从仓库零件到机器人都是现成的,开发者可以快速开始构建。


我们一起了解了如何在虚拟环境中进行机器人的仿真开发与测试,下一次我们将更进一步,还请继续关注系列内容!



了解 NVIDIA Isaac Sim:

https://developer.nvidia.com/isaac-sim


参与 DLI Isaac Sim 机器人仿真介绍课程:

https://courses.nvidia.com/courses/course-v1:DLI+S-OV-03+V1/

(复制链接至浏览器打开)


*本文转载自NVIDIA英伟达企业解决方案。

*与NVIDIA产品相关的图片或视频(完整或部分)的版权均归NVIDIA Corporation所有。

相关推荐

花十几万配的顶级电脑:遭遇诡异Bug无法开机!机主绝望发帖求助

快科技7月1日消息,一位3D图形工作者在组装了一台价值约2万美元(约合14.3万元人民币)的顶级DIY电脑后,遭遇了令人头疼的问题。Reddit用户joel_motion介绍,他的这台电脑配备了AMD...

麒麟系统笔记本电脑问题及解决方法

最近配发了麒麟系统的笔记本电脑,WPS、微信、QQ等软件倒是都有,日常办公还行,但也发现了一些问题,如:1、(网络打印机问题)据到场的技术人员讲,直接USB口连接的常见打印机都有相应的驱动程序,可以正...

电脑驱动问题修复方法全总结(电脑驱动坏了怎么修复不成功呢)

在电脑使用过程中,驱动程序出现问题可能导致设备无法正常工作,影响用户体验。下面为您详细总结不同场景下修复电脑驱动问题的多种解决方案,涵盖从基础到进阶,再到系统级的操作方法,以及硬件排查和预防建议。一、...

电脑总是莫名其妙出故障,立即检查这个设置!

不久前贴吧看到过这么一个帖子:有个做设计的狠人,仗着自己32G内存条,非说虚拟内存是微软的智商税。结果呢?Photoshop渲染到99%直接闪退,3D建模文件当场“灰飞烟灭”。电脑操作系统可不像人懂得...

网友被很简单的一个电脑问题折腾了几个月还没弄好,挺感慨的

昨天晚上,一个网友询问一个型号的电脑主机买了不合适可不可以退,我挺奇怪的,就问他具体怎么回事,他说他的电吉它总是连不上电脑,无法调音,请人重装了几次系统,又请人折腾数次,几个月一直没搞定,怀疑是电脑本...

一次诡异的电脑重启故障(电脑出现异常重启)

在公司的日常运营中,设备的稳定运行至关重要。近日,公司里一台用于检测设备的电脑出现了异常状况,着实让我费了一番周折才解决问题。那天,我接到同事反馈,说这台检测设备电脑莫名地重启。我立刻放下手中的工作,...

德国所有机场突发电脑系统故障 大量航班受影响

当地时间1月3日,德国所有机场突发电脑系统故障,导致大范围航班运行受影响。据德国联邦警察发言人证实,机场边检及相关系统无法正常运行,旅客需面临长时间排队和等待的状况。△资料图多个机场出现严重技术故障据...

电脑维修入门基本知识大全(电脑维修入门基本知识大全图解)

以下是电脑维修入门基本知识的系统整理,结合硬件维护、故障排查及使用习惯三大核心方向,帮助新手快速掌握关键要点:一、硬件基础与识别1.核心组件认知主板:硬件连接中枢,故障易导致开机无反应。CPU/内存/...

电脑上网常用故障及其解决方法(电脑网络故障怎么修复)

干了这么多年的网络,今天我就来总结一下,经常出现的网络故障及其解决的方法,看看有没有哪些故障是你遇见过的?怎么解决的?下面我们从这几个点来分析:一、IP地址问题显示IP地址冲突,我们怎么办?Windo...

维修电脑常用的7个方法(维修电脑常用的7个方法是什么)

今天介绍维修电脑常用的7个解决方法,平时电脑开不了机,按开机键没反应,或者电源指示灯闪烁,屏幕不亮,显示无信号,或者开机主板有警报声,电脑缺少各种系统文件,或者开机蓝屏等使用以下这7个方法,可以修好8...

突然崩了!很多人以为电脑坏了!官方紧急回应

QQ崩了这事儿真挺逗。上午十一点多正干活呢,桌面QQ突然闪退报错,反复登录就是进不去。第一反应绝对是骂电脑不争气,有人甚至把系统重装了。结果热搜跳出来"QQ崩了",合着白忙活半天。腾讯...

电脑网络连不上网?10个步骤轻松排查故障,小白也能自己修!

大家有没有遇到过这种情况?正追剧到关键时刻,突然提示"网络连接失败";急着要交的文档传不上网盘,急得直冒汗。别慌!今天教大家10个小白都能操作的排查方法,不用拆电脑也不用求人,跟着做就...

电脑开机花屏肯定不是电脑的问题(电脑开机花屏是怎么回事)

文章最后,了解更多,领取红包。世界上这么多人,每天运用电脑的人就更是数不计数,所以每天世界上的每个角落都有很多人在面临着不一样的电脑问题。小编我今天就来说说,当电脑出现开机花屏的时候,应该怎么搞定。所...

电脑没有声音怎么办?不是电脑的问题,是你不知道怎么设置的问题

电脑没有声音怎么办?了解这几招快速解决!有没有碰到过这样的经历,电脑用着突然没有声音了;或者重启电脑之后,电脑没声音了。然后绞尽脑汁尝试各种办法,搞了好久也没有解决这个问题,今天小编给大家介绍几种方法...

《电脑故障不求人,这些维修技巧要掌握!》

电脑故障不求人,这些维修技巧要掌握!电脑罢工别慌!掌握基础排查逻辑,80%小问题可自救。以下分场景拆解实用技巧,让你秒变“修机达人”。一、开机无反应:先查“供电三件套”1.电源检查-按机箱电源键,...

取消回复欢迎 发表评论: