Omniverse Replicator 是一个构建在 NVIDIA Omniverse 平台上的高度可扩展框架,它支持物理精确的 3D 合成数据生成 ,以加快感知网络的训练和准确性。
Omniverse Replicator 现在可以通过 NVIDIA NGC 上托管的容器部署在 云端 中, SaaS 可供应用程序早期访问。 Replicator 工具和内容套件现在还包括一个新的 Replicator Insight 应用程序,用于增强对生成数据的查看和检查,以及新的 SimReady 内容和即插即用合成数据工作流指南。
许多合作伙伴正在其现有工具中集成 Omniverse Replicator ,以扩展其合成数据工作流。西门子凭借其 SynthAI 软件、 SmartCow 、 Mirage 和 Lightning AI 率先使用 Omniverse Replicator 加速高质量合成数据生成。
合成数据:从本地到云
对于希望云部署的灵活性和可扩展性的开发人员和企业, Omniverse Replicator 现在可以作为 AWS 上的容器部署使用。您可以成为 NGC 的成员,在 Amazon EC2 G5 实例上访问容器和自助部署,该实例采用 A10G Tensor Core GPU 。
图 1.AWS 云架构上的 Omniverse Replicator
增强的检查和查看
生成合成数据和改进人工智能模型是一个迭代过程,需要能够查看和分析沿途生成的数据集。由于数据不容易导航,注释也不容易检查,所以这个过程可能相当麻烦。
在 GTC 上,我们发布了 Omniverse Replicator Insight early access ,这是一个应用程序,可以让您高效直观地查看、检查和分析生成的带有一系列注释的数据集。 Replicator Insight 允许您逐帧浏览来自不同传感器的生成数据集,选择要查看的兴趣点,并检查特定对象的特定注释。
图 2. Omniverse Replicator Insight 的用户界面
在带有一系列注释的 Replicator Insight 上,查看、检查和分析生成的数据集是高效而直观的。它允许您逐帧浏览不同传感器生成的数据集。可以选择感兴趣的对象来查看和检查特定对象的注释。
Replicator Insight 让开发人员和研究人员朝着以数据为中心的人工智能培训迈出了一大步,将合成数据更无缝地集成到模型改进过程中。
新 SimReady 资产
Omniverse Replicator SimReady Universal Scene Description ( USD )资产可帮助您开始生成合成数据,以缩小模拟与现实之间的差距:
高保真 3D 资产可在像素级别启动合成数据生成。
上下文内容资产,有助于训练场景中数据的多样性、上下文和行为。
传送带、坡道和纸板箱只是 Omniverse Replicator 库中可用的 SimReady 资产的几个示例。
您可以通过 下载 Omniverse 访问第一批免费 SimReady 资产。有关新资产和其他资源的更多信息,请参阅 New Cloud Applications, SimReady Assets, and Tools for Omniverse Developers Announced at GTC 。
Replicator 正在运行
一些合作伙伴正在使用 Omniverse Replicator 来加速 AI 感知网络的培训和性能。它们的应用程序跨越端到端合成数据生成工作流的每个阶段。凭借 Omniverse Replicator 作为其应用程序的基础平台,这些合作伙伴正在帮助客户增强数据集并提高各种行业用例的 AI 模型的准确性。
Mirage 正在帮助 ML 工程师了解他们的数据集的薄弱环节,并集成修复这些薄弱环节的合成数据。 Replicator 是 Mirage 客户生成高保真数据以改进其 ML 模型的主干。
Lightning AI 允许您构建模型并使用或创建 Lightning Apps :功能强大的端到端机器学习系统,完全可定制。 Omniverse Replicator Lightning 应用程序允许您快速生成合成数据,以减少与收集和标记真实数据相关的成本和工作量。
图 3.显示并行模型训练的 Lightning AI 用户界面
使用 Lightning AI ,研究人员和开发人员可以运行并行的 AutoML 作业,找到性能最佳的对象检测模型,并验证真实世界数据的性能,以生成合成数据。
SmartCow 利用 Omniverse Replicator 简单有效地生成具有变化的合成数据。通过 Replicator 添加这些变化使 SmartCow 能够轻松地不断提高模型准确性。 SmartCow 在迭代过程中使用 Replicator 从数据漂移检测中生成其他变化,并创建改进的模型。
Siemens 正与 NVIDIA 合作,将 Omniverse Replicator 高保真渲染功能和 SDK 引入 SynthAI 的云端。这将确保从产品设计和协作到合成数据生成和模型培训的简单、简化的工作流程,并以成功部署结束。
关于作者
Nyla Worker 是 NVIDIA 的解决方案架构师,专注于嵌入式设备的模拟和深入学习。她在机器人和自动车辆的深度学习边缘应用方面拥有丰富的经验,并为嵌入式设备开发了加速推理管道。
Bhumin Pathak 是 NVIDIA 合成数据生成 SDK (也称为 Replicator )的高级产品经理。他喜欢在计算机图形学、 3D 仿真和机器学习的交叉领域工作。在加入 NVIDIA 之前,他曾在迪士尼担任人工智能的应用研究员,并在思科和三星担任其他各种职务。
审核编辑:郭婷
全部0条评论
快来发表一下你的评论吧 !