历史上的今天
今天是:2024年12月19日(星期四)
2019年12月19日 | NVIDIA助力机器人技术的提升 为构建自主机器统一平台树立了里程碑
2019-12-19 来源:NVIDIA
NVIDIA创始人兼首席执行官在NVIDIA的技术会议(GTC CHINA 2019)上宣布了该消息。在建立统一的机器人开发平台以实现、仿真和操控功能方面,Isaac SDK迈出了重要的里程碑。
Isaac SDK包括Isaac Robocs Engine(提供应用程序框架),Isaac GEM(预先构建的深度模型、算法、库、驱动程序和API),用于室内物流的参考应用程序以及Isaac Sim的第一个版本(提供导航功能)。
全新Isaac SDK可以大大加快研究人员、开发人员、初创企业和制造商开发和机器人的速度。它使机器人能够通过仿真获得由人工智能技术驱动的感知和训练功能,从而可以在各种环境和情况下对机器人进行测试和验证。
这样一来,可以节省成本。
从基于AI的感知开始
每台自主机器都始于感知。
为了加快AI机器人的开发速度,全新Isaac SDK包括各种基于摄像头的感知深度神经网络。其中:
·对象检测——识别用于导航、交互或操控的对象
·自由空间分割——检测和分割外部世界,例如确定人行道在哪里,以及机器人可以在哪里行驶
·3D姿态估计——了解目标的位置和方向,从而实现诸如机械臂拾取物体的任务
·2D人体姿态估计——将姿态估计应用于人,这对于与人互动的机器人(例如配送机器人)和协作机器人(专门设计用于与人合作)非常重要
该SDK的对象检测也已通过ResNet深度神经网络进行了更新,可以使用NVIDIA的迁移学习包对其进行训练。这使得添加新对象进行检测和训练新模型变得更加容易,这些新模型可以以较高的准确度启动并运行。
推出Isaac Sim
新版本引入了一项重要功能——使用Isaac Sim训练机器人,并将所生成的部署到在现实世界中运行的真实机器人中。这有望大大加快机器人的开发速度,从而实现综合数据的训练。
通过仿真,开发人员可以在极端情况下(即困难或异常情况下)对机器人进行测试,以进一步加强对它的训练。将这些结果输入训练管道,使神经网络可以基于真实和模拟数据来提高准确性。
多机器人Sim来了
全新SDK也提供了多机器人仿真。这使开发人员可以将多个机器人放入仿真环境中进行测试,以便它们学会彼此相关的工作。各个机器人可以在共享的虚拟环境中移动时,运行独立版本的Isaac导航软件堆栈。
因此,寻求在大型物流管理中运行多个机器人的制造商,可以先测试机器人交互作用并调试问题,再将其部署到现实世界。
Isaac与DeepStream集成
全新SDK还集成了对NVIDIA DeepStream 软件的支持,该软件广泛用于处理分析功能。开发人员可以在支持机器人应用程序的边缘AI 部署DeepStream和NVIDIA GPU,以实现对视频流的处理。
开发人员现在可以构建各种各样的机器人,这些机器人需要对摄像头视频源进行分析,既可以用于机载应用,也可以用于远程定位。
使用Isaac SDK进行编程
最后,对于已经开发了自己代码的机器人开发人员,全新SDK也能集成他们的工作,并添加了基于C编程语言的新API。
这使开发人员可以将自己的软件堆栈连接到Isaac SDK,并最大程度地减少编程语言转换——为用户提供通过C API访问路由的Isaac功能。
C-API访问权限同时支持开发人员在其他编程语言中使用Isaac SDK。
史海拾趣
|
实践当然是最锻炼人的方式,但是我想在校生很少有这样的机会,别说本科生,硕士生也未必有条件。所以我想学习嵌入式要从个人的知识背景和现实条件出发。订立合适的阶段目标,在允许的条件下多动手多思考。 一般情况下对于硬件设备是比较短缺的。 ...… 查看全部问答> |
|
我想问一下,我的下面这段程序: void display(void) { unsigned char t; unsigned char seg_temp; PORTB &=~CS; PORTB &=~WR; send_data(0b10100000,3);//送3 ...… 查看全部问答> |
|
用人单位在考虑聘用女职员时,常担心婚姻和家庭会影响工作,所以面试时往往提出许多相关的问题。因此,能否回答好这些问题,关系到求职是否成功。现向准备求职的女性推荐几种应答方法。 (1)家庭和事业你觉得哪个更重要? & ...… 查看全部问答> |
|
LED显示屏广泛应用于工矿企业、学校、商场、店铺、公共场所等进行图文显示,广告宣传,信息发布。本文设计一种由4个16×16点阵LED模块组成的显示屏,由单片机作控制器,平滑移动显示任意多个文字或图形符号,本电路可级联扩展实现由任意多个16×16 ...… 查看全部问答> |
|
LM3S308串行FLASH程序加载用了是什么上位机下载软件 硬件上是不是只要RS232组成电路就可以吗! 需要外加什么电路还是什么专用下载设备吗?… 查看全部问答> |
|
Xilinx DCM 使用 目前,大型设计一般推荐使用同步时序电路。同步时序电路基于时钟触发沿设计,对时钟的周期、占空比、延时和抖动提出了更高的要求。为了满足同步时序设计的要求,一般在FPGA设 计中采用全局时钟资源驱动设计的主 ...… 查看全部问答> |




