全新 Omniverse Cloud API 帮助开发者采用 OpenUSD;生成式 AI 模型 ChatUSD LLM 使用 USD 进行对话;RunUSD 将 USD 转换成交互式图形,DeepSearch LLM 实现语义 3D 搜索
洛杉矶 — SIGGRAPH — 太平洋时间 2023 年 8 月 8 日 — NVIDIA 于今日宣布将为开发者和企业提供一系列框架、资源和服务,以加速通用场景描述(即 OpenUSD)的采用。
NVIDIA 正在通过 NVIDIA Omniverse™ 与新的技术组合、ChatUSD 和 RunUSD 等云应用编程接口(API)以及全新 NVIDIA OpenUSD 开发者计划来推进 OpenUSD 的发展。OpenUSD 是一个 3D 框架,可实现软件工具与数据类型之间的互通,从而构建虚拟世界。
NVIDIA 上周宣布与皮克斯、Adobe、苹果和 Autodesk 共同成立 OpenUSD 联盟(AOUSD),以统一 OpenUSD 规范。对 OpenUSD 的这些投资将为该联盟添砖加瓦。
NVIDIA 创始人兼首席执行官黄仁勋表示:“正如 HTML 点燃了 2D 互联网的重大计算革命,OpenUSD 也将开启协作式 3D 和工业数字化的时代。NVIDIA 通过开发 NVIDIA Omniverse 和生成式 AI ,正在全力推动 OpenUSD 的发展和应用。”
OpenUSD 上云
NVIDIA 发布了四款自主构建的全新 Omniverse Cloud API,帮助开发者更加无缝地实施和部署 OpenUSD 流程与应用。
●ChatUSD:一款面向开发人员的大型语言模型 (LLM) copilot工具,可以回答USD知识问题或生成 Python-USD 代码脚本。ChatUSD 借助NVIDIA提供的USD功能和 Python-USD 代码片段进行微调。
●RunUSD:其是一个Cloud API,它通过检查上传文件与OpenUSD版本的兼容性,将OpenUSD文件转换为完全路径跟踪渲染的图像,并使用Omniverse Cloud生成渲染。目前,NVIDIA OpenUSD开发者计划中的开发人员可以使用该API的演示。
●DeepSearch:其为 LLM 代理,可在海量无标记资产数据库中进行快速语义搜索。
●USD-GDN Publisher:其为一键式服务,可助力企业和软件制造商从 USD
Composer 等基于 Omniverse 的应用向 Omniverse Cloud GDN发布基于 OpenUSD 的高保真体验,并实时传输到网络浏览器和移动设备。
不断发展演进的 OpenUSD 功能
OpenUSD 旨在更好地连接电影和动画制作流程。同时,工业应用(比如构建具有互操作性的制造设计流程、创建符合物理学的实时工厂数字孪生或训练和验证自动驾驶汽车等)也对 3D 框架提出了不同的要求。
为了支持这些高度复杂的工业和感知 AI 工作负载,NVIDIA 正在开发NVIDIA Omniverse(用于开发应用程序的OpenUSD原生软件平台),以及地理空间数据模型、度量组件、SimReady、OpenUSD 规范等。
OpenUSD 地理空间数据模型让用户可以对逼真的工厂、仓库、城市乃至地球数字孪生进行模拟和计算。对于极大规模的项目,它还会考虑到地球的曲率以确保模拟符合物理学。
工业应用需要合并来自许多工具和来源的数据集,每个数据集以不同的单位表示。NVIDIA 正在开发一个 OpenUSD 度量组件,使用户能够百分之百准确地合并不同格式的数据集。
NVIDIA 还在开发适用于全新 SimReady 3D 模型的结构。这些模型将包含真实的材质和物理属性,这对于精准训练自主机器人和车辆至关重要。例如负责分拣包裹的自主机器人需要在 3D 包裹上进行模拟训练,这些包裹会像在真实世界中一样移动并对物理接触做出反应。
欢迎通过 NVIDIA OpenUSD 开发者计划 抢先体验 OpenUSD 服务、资源和工具,其中包括由 NVIDIA 设计师和艺术家构建的两个可完整分发的全新 OpenUSD 示例场景—— Da Vinci’s Workshop 与 Riverfront Tower。
进一步了解 OpenUSD及其生态网络、OpenUSD联盟 和 NVIDIA Omniverse 平台。观看 NVIDIA 创始人兼首席执行官黄仁勋的 SIGGRAPH 主题演讲。