最新平臺更新、Adobe Firefly 的接入、OpenUSD 向 RealityKit 的導入以及 Ada 架構系統將共同加速各種具有互操作性的 3D 工作流以及工業數字化進程。
洛杉磯 — SIGGRAPH — 太平洋時間 2023 年 8 月 8 日 —NVIDIA 發布 NVIDIA Omniverse 平臺的重要版本更新,為開發者和工業企業提供全新的基礎應用和服務,助力其使用 OpenUSD 框架和生成式 AI 來優化并強化其 3D 工作流程。
Omniverse 是一個 OpenUSD 原生軟件平臺,可進行跨 3D 工具和應用的連接、描述及模擬。此次更新將加快虛擬世界和高級工作流的創建速度,推動工業數字化進程。Cesium、Convai、Move AI、SideFX Houdini 和 Wonder Dynamics 現已通過 OpenUSD 接入 Omniverse。
此次平臺更新主要升級了 Omniverse Kit(用于開發原生 OpenUSD 應用和擴展程序的引擎),以及 NVIDIA Omniverse Audio2Face 基礎應用和空間計算功能。
NVIDIA Omniverse 與模擬技術副總裁 Rev Lebaredian 表示:“工業企業正在競相推動工作流的數字化,這提升了對 OpenUSD 賦能、互聯、可互操作的 3D 軟件生態的需求。最新的 Omniverse 更新讓開發者能夠通過 OpenUSD,利用生成式 AI 來強化自身工具,并讓企業能夠構建更大、更復雜的世界級模擬,以此作為其工業應用的數字測試場。”
重要改進
Omniverse Kit 的更新包括:
-
全新模塊化應用構建:全新 Omniverse Kit Extension Registry 是一個用于訪問、共享和管理 Omniverse 擴展程序的中央存儲庫,開發者可以輕松啟用或關閉其應用中的功能,因此能夠比以往更加輕松地利用 NVIDIA 提供的 600 多個核心 Omniverse 擴展程序來構建自定義應用。
-
全新開發者模板和資源:全新應用和體驗模板讓剛開始使用 OpenUSD 和 Omniverse 的開發者只需要進行極少量的編碼工作就能輕松上手。
-
提升效率和用戶體驗:全新渲染優化功能充分利用 NVIDIA RTX GPU 中 NVIDIA Ada Lovelace 架構的各項改進,并將 DLSS 3 技術完全集成到 Omniverse RTX 渲染器中。全新 AI 降噪器可實現大型工業場景的實時 4K 路徑追蹤。
-
由原生 RTX 驅動的空間集成:全新擴展現實(XR)開發者工具可讓用戶在基于 Omniverse 的應用中構建原生空間計算選項,使用戶能夠按照自己的想法靈活地體驗 3D 項目和虛擬世界。
這些平臺更新在 Omniverse 基礎應用中得到了展現。Omniverse 基礎應用是完全可定制的參考應用,創作者、企業和開發者可以對其進行復制、擴展或改進。升級的應用包括:
-
Omniverse USD Composer:讓 3D 用戶能夠組裝基于 OpenUSD 的大型場景。
-
Omniverse Audio2Face:提供對只需通過音頻文件即可創建逼真面部動畫和手勢的生成式 AI 應用編程接口的訪問。現在還添加了多語種支持和全新女性基礎模型。
OpenUSD 擴展 Omniverse 生態
NVIDIA 還發布了一系列面向開發者和企業的框架、資源和服務,以此加速通用場景描述(即OpenUSD)的采用。
此外,NVIDIA 還宣布構建了全新的 Omniverse Cloud API,供開發人員更無縫地實現和部署 OpenUSD 工作流和應用程序。例如,ChatUSD 是一個供開發人員使用的大型語言模型(LLM) copilot 工具,可以回答 USD 知識問題或生成 Python-USD 代碼腳本。
OpenUSD 支持的全新 Omniverse 連接器現已推出,為工業企業打破復雜生產流水線中的數據孤島帶來了更多的可能性。
Adobe 與 NVIDIA 宣布計劃將 Adobe Firefly(Adobe 的創意生成式 AI 模型系列)作為 Omniverse 的 API 提供給開發者和創作者,助力其完善設計流程。此舉擴大了雙方在 Adobe Substance 3D、生成式 AI 和 OpenUSD 項目方面的合作。
Wonder Dynamics 已接入 Omniverse,通過其 AI 平臺 Wonder Studio 提供全新 OpenUSD 導出支持。Wonder Studio AI 平臺可自動對計算機生成的角色進行動畫化、添加照明并合成到實時動作場景中。全新 OpenUSD 導出支持將使藝術家只需要使用單個攝像機拍攝的視頻,就能生成并導出完整的 3D 場景。
Luma AI 以 USDZ 格式制作的現實捕捉模型可以隨時導入到 Omniverse 中。虛擬形象公司 Convai 和角色引擎公司 Inworld AI 的工具也接入了 Omniverse。借助 Convai 等 AI 工具,創作者可以在數字孿生環境中添加角色,這些角色可以提供環境和物體的相關信息,也可以充當導游或虛擬機器人。Move AI 通過 Move One 應用實現了單攝像頭動作捕捉,捕捉的圖像可用于生成 3D 角色動畫,然后將其導出到 OpenUSD 并在 Omniverse 中使用。
Omniverse 用戶現在可以構建與其他基于 OpenUSD 的空間計算平臺(如 ARKit 和 RealityKit)兼容的內容、體驗和應用。此外,對 Khronos Group OpenXR 開放標準的全新支持將 Omniverse 的應用范圍擴展到了 HTC VIVE、Magic Leap 和 Varjo 等制造商生產的更多頭顯。
SideFX Houdini 的用戶現在還可以將 Houdini Digital Assets 直接加載到 Omniverse 視窗中,使基于 Houdini 的互聯工作流銜接得更加無縫。Cesium 的 Omniverse 擴展程序 Cesium for Omniverse 支持 3D Tiles。3D Tiles 是一種在虛擬世界(包括 OpenUSD 支持的虛擬世界)中傳輸大規模地理空間數據集的開放標準。CGI.Backgrounds 現在可在 USD Composer 中使用多種超高清 HDRi 貼圖。Cadence DataCenter Design Software 現可在 Omniverse 上使用,其可幫助用戶在完整的數字孿生情境中查看計算流體動力學模擬。借助 Cadence 數據中心擴展程序,用戶可以在實施前規劃、測試并驗證設計和運營方面的考慮因素。Blackshark.AI 世界數字孿生平臺現已接入 Omniverse。
客戶使用 Omniverse 實現數字化
多家客戶正在使用 Omniverse 來完成從模擬機器人到訓練 AI 模型和改進動畫等各種任務。
波士頓動力人工智能研究所(Boston Dynamics AI Institute)正在使用 Omniverse 模擬機器人及其交互,以推動新型機器人和控制系統的設計工作。汽車和自主系統產業化領域的領先企業大陸集團正在其移動機器人業務中使用 Omniverse,以大規模地生成符合物理學的合成數據,用以訓練計算機視覺 AI 模型和執行系統集成測試。
沃爾沃汽車已將其數字孿生轉為 OpenUSD 格式,使用 Omniverse 創造出沉浸式可視化效果,幫助客戶在線做出購買決策。
品牌設計及體驗機構 Marks Design 正在使用 Omniverse 和 OpenUSD 來簡化并提高協作的效率,同時改進其動畫、可視化和渲染工作流。
全新 Omniverse 系統與合作伙伴
NVIDIA 正在與全球各地的系統制造商協作,致力于為數百萬設計師、建筑師和工程師提供針對 Omniverse 優化配置的 RTX 工作站。這些新系統最多可搭載四顆 NVIDIA RTX 6000 Ada Generation GPU 并搭配 NVIDIA Omniverse Enterprise 軟件,可加速 OpenUSD 世界的構建、生成式 AI 賦能的協同設計以及其他工業數字化應用。
Omniverse 用戶還可以充分利用全新 NVIDIA L40S GPU 的性能。這款功能強大的通用數據中心 GPU 可加速圖形密集型工作負載。
供應情況
最新 Omniverse 版本現已發布可免費下載的公測版,將于近期通過 Omniverse Enterprise 提供。
點擊“閱讀原文”,或掃描下方海報二維碼,觀看 NVIDIA 創始人兼 CEO 黃仁勛在 SIGGRAPH 現場發表的 NVIDIA 主題演講回放,了解 NVIDIA 的新技術,包括屢獲殊榮的研究,OpenUSD 開發,以及最新的 AI 內容創作解決方案。
原文標題:SIGGRAPH 2023 | NVIDIA 發布支持生成式 AI 與 OpenUSD 的重大 Omniverse 升級
文章出處:【微信公眾號:NVIDIA英偉達】歡迎添加關注!文章轉載請注明出處。
-
英偉達
+關注
關注
22文章
3842瀏覽量
91685
原文標題:SIGGRAPH 2023 | NVIDIA 發布支持生成式 AI 與 OpenUSD 的重大 Omniverse 升級
文章出處:【微信號:NVIDIA_China,微信公眾號:NVIDIA英偉達】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論