NVIDIA Agent Toolkit 现已包含 NVIDIA Omniverse 库为 AI 智能体提供多种工具和技能以帮助软件开发者将物理 AI 功能集成到现有应用中。适用于 NVIDIA RTX 传感器仿真、GPU 加速物理仿真和支持仿真资产验证的全新 Omniverse 库现已在 GitHub 上公开发布。NVIDIA 今日宣布NVIDIA Agent Toolkit 现已包含NVIDIA Omniverse™ 库 —— 这是一套软件组件集合为 AI 智能体提供各种工具和技能从而为现有应用添加物理 AI 功能并为仿真准备 3D 内容。机器人、工厂和自主系统在进入现实世界运行之前需要先在仿真环境中进行设计、测试和训练。为仿真准备 3D 内容不仅需要逼真的视觉效果 —— 资产还需要具备正确的结构、材质、规模、标签、传感器和物理属性。借助 NVIDIA Agent Toolkit 中的 NVIDIA Omniverse 库AI 智能体具备了构建工作流、检查场景、标记问题和准备资产的工具和技能帮助开发者更快地将 3D 内容转换为可直接用于仿真的环境。NVIDIA 创始人兼首席执行官黄仁勋表示“物理 AI 时代将始于在仿真中构建。结合 Omniverse 库的 NVIDIA Agent Toolkit 将 AI 智能体引入开发者已在使用的 3D 工具中帮助构建可直接用于仿真的世界让机器人、工厂和自主系统在进入现实世界之前早在其中进行训练和测试。”包括 SideFX 和PTC 在内的软件制造商正在集成 Omniverse 库以实现面向智能体的传感器仿真、物理仿真和资产验证从而帮助将代理式 AI 引入开发者和技术美术已经用于准备 3D 内容的应用和工作流中。Omniverse 库将物理 AI 技能引入 NVIDIA Agent ToolkitNVIDIA Agent Toolkit 帮助软件制造商构建连接工具、技能和数据源的 AI 智能体。Omniverse 库通过在现有应用中提供用于传感器仿真、GPU 加速物理仿真以及可直接用于仿真资产验证的可调用工具将这些智能体扩展到 3D 和物理 AI 工作流中。全新 Omniverse 库 —— 包括 ovrtx、ovphysx 和 CAD-to-SimReady 技能 —— 已在GitHub 上公开发布为 AI 智能体提供了构建工作流的工具以检查场景、测试更改并为仿真准备 3D 资产。用于在 Blender 中集成 Omniverse 库的全新蓝图现也可在GitHub 上获取。这些库的主要功能包括● NVIDIA RTX 传感器仿真ovrtx 帮助应用从 3D 场景生成摄像头、激光雷达、雷达和其他传感器输出以便开发者和 AI 智能体可以测试物理 AI 系统如何感知虚拟环境。● 物理行为ovphysx 使用 GPU 加速物理仿真通过碰撞、质量、摩擦和运动等属性为 3D 场景带来逼真的行为因此团队可以先在仿真中测试物体和系统之间的交互。● 面向仿真的 3D 对象CAD-to-SimReady 技能有助于将计算机辅助设计 (CAD) 数据转换为基于OpenUSD 构建的SimReady 资产赋予 3D 内容物理 AI 仿真和虚拟测试所需的属性。软件制造商使用 Omniverse 库进行构建包括 SideFX 和 PTC 在内的软件制造商以及 ForgeCAD、光轮智能、Moonlake AI 和 Palatial 等初创公司均率先采用 Omniverse 库 (现已成为 NVIDIA Agent Toolkit 的一部分) 进行构建。SideFX 正在使用 OpenUSD 工作流以及 ovrtx 和 ovphysx 库探索智能体如何帮助将 Omniverse 库集成到其 Houdini 程序化 3D 内容创作工作流中为技术美术提供生成、测试物理仿真效果和准备仿真内容的途径。SideFX 总裁兼首席执行官 Kim Davidson 表示“程序化 3D 创作对于构建仿真、机器人和工业 AI 所需的复杂、可控世界至关重要。借助 NVIDIA Omniverse 库和 OpenUSDSideFX 正在探索面向智能体的工具如何支持 Houdini 工作流帮助技术美术在保持对创作过程的把控的同时审核、测试并为仿真准备程序化内容。”PTC Onshape CAD 和产品数据管理 (PDM) 平台正在使用 OpenUSD 和 ovrtx 将云原生设计工作流与物理仿真相连接帮助产品设计内容与 CAD、PDM、协作和仿真工作流保持连接。PTC 总裁兼首席执行官 Neil Barua 表示“工程团队正在寻求在整个开发过程中以更具连接性的方式进行设计、协作和仿真。PTC 与 NVIDIA 的协作支持了这一更广泛的愿景而 NVIDIA Omniverse 库有助于实现可直接用于仿真的工作流使验证和测试更接近产品设计的环节。”在 SIGGRAPH 上展示的 “SimReady” Blender 是一个在 Blender 中借助 NVIDIA Omniverse 库和NVIDIA NemoClaw™ 构建的示例工作流。它展示了软件制造商如何将面向智能体的仿真功能 —— 包括 NVIDIA RTX 传感器仿真、物理仿真和验证 —— 添加到现有 3D 应用中同时保持创作者的把控权。该蓝图现已作为在 Blender 中集成 Omniverse 库的蓝图公开发布。该演示还预览了这些基于 Omniverse 库、作为 NVIDIA Agent Toolkit 一部分的工作流如何在本地运行支持的设备从搭载NVIDIA RTX Spark™ 超级芯片的笔记本电脑和紧凑型桌面主机到搭载 NVIDIA Grace Blackwell Ultra 的NVIDIA DGX Station 系统。RTX Spark 笔记本电脑将于今年秋季由华硕、戴尔、惠普、联想、微软 Surface 和微星推出宏碁和技嘉的相关产品也将随后推出。DGX Station 系统可通过 华硕、戴尔、技嘉、惠普、微星、Supermicro 和 Exxact 进行订购。包括NVIDIA 初创加速计划成员在内初创公司也正在使用 Omniverse 库和技能来添加智能体辅助资产和场景准备工作流。Palatial 正在使用 Omniverse CAD-to-SimReady 技能从 CAD 输入大规模自动创建和验证 SimReady 资产。光轮智能在其 SimReadyGen 技术中使用由 OpenUSD 提供支持的 Omniverse Content Agent 根据文本提示生成物理精确的 SimReady 资产。ForgeCAD 和 Moonlake AI 正在探索由智能体驱动的 3D 内容工作流这些工作流使用 Omniverse 功能来帮助生成、增强并为物理 AI 仿真准备资产。观看 SIGGRAPH 大会上的NVIDIA 主题演讲。详细了解NVIDIA Omniverse 库并探索可用的示例和文档。更多信息请参见官网。