新款Omniverse Cloud API協助開發人員採用OpenUSD;生成式人工智慧模型ChatUSD LLM以USD進行對話; RunUSD將USD變成互動式圖形,還有DeepSearch LLM支援語義3D搜尋
NVIDIA 今日宣布為開發人員和企業提供多項框架、資源和服務,以加速通用場景描述(OpenUSD)的採用。
NVIDIA 透過 NVIDIA Omniverse 與 ChatUSD 和 RunUSD 等全新的技術組合和雲端應用程式設計介面(API)以及新的 NVIDIA OpenUSD 開發者計畫,推動開發 OpenUSD 這個可在軟體工具和資料類型之間實現互通性,以打造虛擬世界的 3D的框架。
這些對 OpenUSD 的投資是 NVIDIA 與 Pixar、Adobe、Apple 及 Autodesk 共同成立之 Alliance for OpenUSD(AOUSD)的延伸擴展,該聯盟上週宣布將制定標準化的 OpenUSD 使用規範。
NVIDIA 創辦人暨執行長黃仁勳表示:「正如 HTML 引發了 2D 網際網路的重大運算革命一樣,OpenUSD 將引領協作 3D 和工業數位化時代的到來。NVIDIA 透過開發 NVIDIA Omniverse 和生成式人工智慧技術,全力支持推動 OpenUSD 的進步和採用。」

OpenUSD在雲端
NVIDIA 宣布推出四款由 NVIDIA 打造的全新 Omniverse Cloud API,供開發人員更加流暢地實現和部署 OpenUSD 流程和應用項目。
- ChatUSD:這個針對開發者的大型語言模型協作夥伴,能從文字生成 Python-USD 程式碼腳本,以及回答 USD 知識問題。ChatUSD 透過 NVIDIA 的 USD 功能和 Python-USD 程式碼片段進行了最終微調。
- RunUSD:這個雲端 API 用於檢查上傳檔案與 OpenUSD 版本的相容性,並且使用 Omniverse Cloud 產生渲染結果,將 OpenUSD 檔案轉換成完全路徑追蹤的渲染影像。現在這個 API 的示範版本已提供給參加 NVIDIA OpenUSD 開發者計畫的開發人員使用。
- DeepSearch:這個 LLM 代理可在大量未標記資產的資料庫中進行快速語義搜尋。
- USD-GDN Publisher:企業與軟體製造商能夠利用這項一鍵式服務,從 USD Composer 等基於 Omniverse 的應用程式,向 Omniverse Cloud Graphics Delivery Network(GDN)發布逼真寫實、基於 OpenUSD 的體驗內容,以及即時以串流方式傳輸到網路瀏覽器和行動裝置。
不斷演化的OpenUSD功能
發明 OpenUSD 的目的是為了更好地連接電影和動畫流程。建立可互通的製造設計管道、精準符合物理原理的工廠實時數位孿生模型,或是訓練和驗證自動駕駛車輛等工業應用項目對 3D 框架有著不同要求。
NVIDIA 正在開發 NVIDIA Omniverse,這個支援 OpenUSD 的軟體平台,用於開發應用程式,以及包括地理空間資料模型、度量組件和模擬就緒(SimReady)在內的 OpenUSD 技術規範,以支援這些極為複雜的工業和感知人工智慧工作負載。
使用者可使用 OpenUSD 的地理空間資料模型,為工廠、倉庫、城市甚至地球的逼真數位孿生模型進行模擬和計算。對於極端超大規模的項目,它會考慮地球的曲率,以確保模擬的物理精確性。
工業應用項目結合了來自許多工具和來源的資料集,每個工具和來源都以不同的單位表示。 NVIDIA 正在為 OpenUSD 開發一個度量組件,使得使用者能夠完全準確地組合不同的資料集。
NVIDIA 還在開發新的 SimReady 3D 模型結構。這些模型將納入逼真的材料和物理特性,這對於準確訓練自主機器人和車輛而言十分重要。舉例來說,負責分揀包裹的自主機器人需要在模擬環境中以 3D 包裹進行訓練,使其像在實體環境中一樣移動,並且對實體接觸做出反應。
加入NVIDIA OpenUSD 開發者計畫,就能優先使用 OpenUSD 服務、資源和工具。其中包括由 NVIDIA 設計師和藝術家建立的 Da Vinci’s Workshop 及 Riverfront Tower 這兩個新款完全可分發的 OpenUSD 範例場景。
深入瞭解有關 OpenUSD、其連接生態系統、AOUSD 和 NVIDIA Omniverse 平台的資訊。歡迎觀看 NVIDIA 創辦人暨執行長黃仁勳在 SIGGRAPH 現場的主題演講。