NVIDIA 知乎精彩问答甄选 | 查看 NVIDIA Jetson 相关精彩问答

描述

NVIDIA 带来知乎精彩问答甄选系列,将为您精选知乎上有关 NVIDIA 产品的精彩问答。


本期为问答甄选第十二期 —— 查看 NVIDIA Jetson 相关精彩问题


英伟达


以下两个知乎甄选问答将为您了解 NVIDIA Jetson 相关内容来更加精彩的解答!


Q: 

选用什么样的系统或平台开发机器人/机器臂?


A:

随着人工智能技术的快速发展,开发机器人/机器臂的平台或者系统也是越来越多,不同背景知识和不同需求的开发者对于平台的性能要求也是各不相同。在这种情况下,NVIDIA 的开发平台可一定不要错过,总有一款方案适合你!

使用基于 Omniverse Enterprise 平台的 Isaac Sim 工具进行虚拟仿真

在现实世界中制造机器人需要从头开始创建数据集,既费时又费钱,而且会减缓部署速度。

因此,为了降低成本和加快部署,开发人员正在转向合成数据生成(SDG)、预训练 AI 模型、迁移学习和机器人仿真这几种方式。

NVIDIA OVX 服务器上运行的 Omniverse Cloud 平台即服务,为世界各地的 Azure 开发人员带来各种先进的功能,使企业能够扩展 SDG 等机器人仿真工作负载,并为开发团队提供持续集成和交付能力,让他们在使用 Isaac Sim 的同时能够在一个共享的资源库中修改代码。

Isaac Sim 是一个机器人仿真应用和 SDG 工具,驱动逼真的、物理准确的虚拟环境。在 NVIDIA Omniverse 平台的赋能下,Isaac Sim 使全球团队能够开展远程协作,一起构建、训练、仿真、验证和部署机器人。

除了现有的基于云的方法,如在自管理容器中使用 Isaac Sim,或者在虚拟工作站或 AWS RoboMaker 等全代管服务上使用 Isaac Sim 等,Omniverse Cloud 将通过 Azure 为企业提供更多的云选项。

而工程师可以通过接入 Isaac Sim 中的 SDG 引擎 Omniverse Replicator 来建立生产级合成数据集,用于训练强大深度学习感知模型。

使用 Jetson Orin 打造高效率、高性能边缘 AI 和机器人

NVIDIA Jetson Orin 模组现已可用于量产,可支持各种边缘 AI 和机器人技术应用,包括可提供每秒 40 万亿次运算(TOPS)AI 性能的最小 Jetson 模组 Jetson Orin Nano,以及为先进自主机器提供 275 TOPS 性能的 Jetson AGX Orin

与上一代 Jetson Nano 相比,全新 Jetson Orin Nano 开发者套件的性能提高了 80 倍,使开发人员能够运行先进的转换器和机器人模型。由于每瓦性能提高了 50 倍,刚开始使用 Jetson Orin Nano 模组的开发人员可以构建和部署节能的入门级 AI 机器人、智能无人机,以及智能视觉系统等。

在 Jetson 平台上运行的 NVIDIA Isaac ROS 和 DeepStream 等特定应用框架与云框架紧密集成,如 Omniverse 平台上的 Isaac Sim 和 NVIDIA Metropolis 等。开发人员还可使用最新 NVIDIA TAO 工具套件对 NVIDIA NGC 产品目录中的预训练 AI 模型进行微调,缩短部署时间。

已有超过 100 万名开发人员和 6000 多家客户选择 NVIDIA Jetson 平台。70 多家 Jetson 生态合作伙伴正在提供基于 Orin 的解决方案,以及覆盖硬件、AI 软件和应用设计服务、传感器、连接和开发者工具的全方位支持。



Q: 

如何制作一个机器人?


A:

提到制作一个机器人,许多人都会认为是一件非常高大上的事情,但其实并没有那么困难,就像风靡全球的漫威电影《钢铁侠》中的主人公一样,我们也可以自己动手制作一个机器人。接下来 NVIDIA 就为大家带来创客 Kris Kersey 的故事,他真的自己制作出了《钢铁侠》中的超级英雄头盔。

Kris Kersey 是一名拥有 20 多年经验的嵌入式软件开发人员,同时也是一个拥有 3 万多名订阅者的 YouTube 教育频道主播,以及漫画与 COSPLAY 狂热爱好者。

他在自己的首个项目中使用 NVIDIA Jetson 边缘 AI 和机器人技术平台将这些兴趣和专长糅合到一起,完整还原了《钢铁侠》中的超级英雄头盔。

这个 3D 打印头盔 HUD 配备了计算机视觉功能,可以像电影中那样显示用户所见之物的信息。

NVIDIA Jetson 平台负责处理来自两个摄像头的数据(每个眼槽一个),这两个摄像头可以“看到”头盔佩戴者目光所及的东西。然后,HUD 会显示当前温度、湿度、高度和 GPS 位置等信息,还可以基于用于物体检测的深度神经网络,对用户视野中的物体进行分类。

为了与他人分享这份快乐,Kersey 在他的 YouTube 频道—— Kersey Fabrications 上分享了整个制作流程。

他表示,超级英雄电影和科幻小说都提醒自己,实现尖端技术需要跨学科协作。

他还提到:“就像这个项目一样,一般情况下艺术家和故事讲述者负责发挥自己的想象力,构思出精彩的想法,然后由科学家和工程师把这些想法变成现实”。

Kersey 曾在佐治亚州的南方理工大学(现隶属于肯尼索州立大学学习计算机科学,他在嵌入式微处理器架构方面积累了丰富的工作经验,且专门研究与 NVIDIA Jetson 平台兼容的 Linux 操作系统。

Kersey 表示:“在 Jetson 平台上编写软件不需要学习新的编程语言或操作系统,所以对我来说是很容易的。”

白天,他是一家亚特兰大初创企业的软件工程师。晚上,他在自己的个人创客空间做自己的项目。

“我的车库从不是用来停车的。”相反,他的车库中充满着让他的奇思妙想得以实现的各种工具、电路板和其他设备。

Kersey 小时候就痴迷于技术。他的母亲是一位计算机辅助绘图和机械设计教师。

“从很小的时候起,我就可以摆弄她用的电脑,我对电脑十分着迷。堂兄曾给了我一台旧的 8 位电脑,刚开始不太会用,我就掏出说明书读完整本,学会了基本的编程。”

后来,在帮助儿子完成一个科学奥林匹克竞赛项目时,Kersey 开始接触 3D 打印。

他表示:“从那时候起,我开始真正喜欢上了 3D 打印,不过我儿子不怎么喜欢。”

2018 年,Kersey 开设了自己的 YouTube 频道,主要分享 3D 打印方面的内容。在此过程中,他逐渐成为了一名资深创客,同时也将个人所学教给观众。

Kersey 完整还原的 3D 打印无线钢铁侠头盔,简直与这个经典电影系列中的头盔如出一辙,就连头盔的打磨和上色也是他亲力亲为完成。

头盔模型以 NVIDIA Jetson Xavier NX 开发套件为核心,驱动头盔的 HUD。

他提到:“为了让头盔戴起来与《钢铁侠》中的一样拉风,必须拥有实时、低延迟、高分辨率和高帧数的特点。屏幕上还必须显示大量信息,这就需要有强大的图形处理器,所以我选择了 Jetson 平台。”

Jetson 开发者套件配备了强大的板载 NVIDIA GPU 和 AI 功能来加速嵌入式应用。

Kersey 还使用 NVIDIA TensorRT 软件开发套件,让项目实现了低延迟、高吞吐量的高性能深度学习推理。

为了打造出新一代头盔 HUD,Kersey 使用了 NVIDIA Jetson Orin Nano 开发者套件,并表示这个项目“直到最后一刻才见分晓”。NVIDIA Jetson Orin Nano 套件于 2022 年 9 月推出,为创建入门级 AI 机器人、智能相机等制定了新的标准。

Kersey 表示,从打开 Jetson Orin Nano 包装盒到部署和运行软件,只花了他两个小时。

他目前想要使用 Jetson Orin NX 16GB 系统级模组升级项目,并从铝制钢铁侠手炮(Repulsor)原型开始,打造一整套包含头盔的钢铁侠盔甲。

他表示很快将开源该项目的代码,这样其他人也可以轻松地把自己变成超级英雄。


更多精彩问答,点击下方小程序,关注 NVIDIA 知乎账号!



NVIDIA 知乎精彩问答甄选往期精彩内容

NVIDIA 知乎精彩问答甄选(一) | 探讨人工智能成为“新电力”的桎梏与突破点
NVIDIA 知乎精彩问答甄选(二) | 探索 H100 的奥秘!
NVIDIA 知乎精彩问答甄选(三) | 探寻 Isaac Nova Orin
NVIDIA 知乎精彩问答甄选(四) | 了解 Jetson AGX Orin
NVIDIA 知乎精彩问答甄选(五) | 揭秘 NVIDIA Hopper 架构
NVIDIA 知乎精彩问答甄选(六) | 追寻 NVIDIA Grace CPU
NVIDIA 知乎精彩问答甄选(七) | 分享 NVIDIA 自动驾驶精彩问答
NVIDIA 知乎精彩问答甄选(八) | 分享 Omniverse 相关精彩问答
NVIDIA  知乎精彩问答甄选(九)  | 分享 NVIDIA 网络相关精彩问答NVIDIA 知乎精彩问答甄选(十) | 查看 NVIDIA Omniverse 相关精彩问答
NVIDIA 知乎精彩问答甄选 (十一)| 发掘 NVIDIA 医疗行业相关精彩问答

更多精彩仍在继续... 

敬请关注


GTC 2024 将于 2024 年 3 月 18 至 21 日在美国加州圣何塞会议中心举行,线上大会也将同期开放。点击 “阅读原文” 扫描下方海报二维码,关注更多会议及活动信息。


英伟达


原文标题:NVIDIA 知乎精彩问答甄选 | 查看 NVIDIA Jetson 相关精彩问答

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分