By accepting you will be accessing a service provided by a third-party external to https://www.incgmedia.com/
NVIDIA Omniverse 重大更新!將整合 Adobe 生成式人工智慧技術,透過 OpenUSD 擴大生態系
NVIDIA 今日於 SIGGRAPH 2023 宣布推出 NVIDIA Omniverse™ 平台重大升級,為開發人員和工業領域的各大企業提供嶄新的基礎應用程式及服務,以利用 OpenUSD 框架和生成式人工智慧來最佳化及增強其 3D 流程。Omniverse 是一個用於連接、描述和模擬各種基於 OpenUSD 的 3D 工具及應用程式的軟體平台,這次推出的更新項目加快了建立虛擬世界與工業數位化的先進工作流程。Cesium、Convai、Move AI、SideFX Houdini 及 Wonder Dynamics 現已透過 OpenUSD 連接到 Omniverse 平台。
這次發表的 Omniverse 平台更新項目中,主要亮點包括用於開發原生 OpenUSD 應用程式和擴充項目的引擎 Omniverse Kit,以及 NVIDIA Omniverse Audio2Face™ 基礎應用程式和空間運算功能。
NVIDIA Omniverse 與模擬技術部門副總裁 Rev Lebaredian 表示:「工業領域的各大企業正競相對其工作流程進行數位化,如此一來對支援 OpenUSD 的、連網的、互通的 3D 軟體生態系統出現更大的需求。最新的 Omniverse 更新項目讓開發人員可以透過 OpenUSD利用生成式人工智慧技術更大程度地發揮工具的能力,它使企業能夠建立更大、更複雜的世界級模擬,作為其工業應用項目的數位測試場域。」
重點優化項目
Omniverse Kit 的更新內容有:
- 全新模組化應用程式建立工具:全新推出的 Omniverse Kit Extension Registry 是用於存取、共享和管理 Omniverse 擴充項目的中央儲存庫,讓開發人員可以輕鬆開啟和關閉其應用程式中的功能,從而比以往更容易地使用 NVIDIA 所提供的500 多個核心 Omniverse 擴充項目,按照個別需求開發應用程式。
- 全新開發人員範本與資源:全新應用程式和體驗範本能讓開發人員使用最少的程式設計,就能輕鬆上手使用 OpenUSD 和 Omniverse。
- 提高效率和創造良好的使用者體驗:全新的渲染最佳化項目充分利用 NVIDIA RTX™ GPU 中的 NVIDIA Ada Lovelace 架構增強功能,DLSS 3 技術與 Omniverse RTX Renderer 完全整合,而新款人工智慧降噪器可以對大量工業場景實時 4K 路徑追蹤。
- 原生 RTX 驅動的空間整合:使用者可利用全新的延展實境(XR)開發工具,將空間運算選項內建至 Omniverse 的應用程式內,讓使用者能夠靈活選擇如何體驗 3D 項目和虛擬世界。
在 Omniverse 基礎應用程式中可以見到這些新的平台更新項目,而創作者、企業及開發人員可以複製、擴充或增強這些完全可客製化的參考應用程式。本次升級的應用程式有:
- Omniverse USD Composer:讓 3D 使用者可組裝基於 OpenUSD 的大型場景。
- Omniverse Audio2Face:提供使用生成式人工智慧應用程式設計介面,從一個聲音檔案即可建立逼真的臉部動畫和手勢,到現在加入支援多種語言和新的女性基礎模型。
OpenUSD 擴大 Omniverse 生態系統
NVIDIA 還宣布為開發人員和企業推出多款框架、資源和服務,以加速推動業界採用通用場景描述( OpenUSD)。此外,NVIDIA發表了新開發的Omniverse Cloud APIs,供開發者可以更即時地實施和部署 OpenUSD 工作流程和應用程式。例如,ChatUSD 是一個能協助開發者的大型語言模型,可以回答 USD 相關問題或生成 Python-USD 程式碼。由 OpenUSD 支援的全新 Omniverse 連接項目現已開放使用,讓工業領域裡的各大企業有更多機會打破複雜生產管道中的數據孤島。
Adobe Firefly API 加強設計流程
Adobe 與 NVIDIA 擴大雙方在 Adobe Substance 3D、生成式人工智慧及 OpenUSD 計畫方面的合作,宣布打算將 Adobe 的創意生成式人工智慧模型系列 Adobe Firefly,作為 Omniverse 平台中的 API 提供給開發人員和創作者使用,以增強他們的設計流程。
下列影片為 NVIDIA 於 SIGGRAPH 2023 Real-time Live 的展示內容,與 Adobe Firefly 沒有任何相關。此影片展示在 NVIDIA Omniverse 中的 USD Composer(先前叫 Omniverse Create),透過 OpenUSD 所整合的 3D 場景,為其中的模型物件生成貼圖。除了可生成像是磚塊、布料等貼圖外,還可以透過 Promopt 文字在特定區域生成抽象的動物畫作。
對其它 AIGC 工具的流程整合
Wonder Dynamics 現已透過 Wonder Studio AI 平台連接到 Omniverse,提供全新的 OpenUSD 匯出支援功能,而 Wonder Studio AI 平台可自動將電腦生成的角色製作成動畫、光線處理以及與真實場景合成。藝術家使用新的 OpenUSD 匯出支援功能,可以從單一支攝影機影片生成及匯出完整的 3D 場景。
Luma AI 的 USDZ 格式實景建模可以輕鬆匯入 Omniverse 平台。虛擬角色公司 Convai 和角色引擎公司 Inworld AI 的工具已與Omniverse連結。創作者使用像是 Convai 這類的人工智慧工具,能在數位孿生環境中添加可提供與環境和物體有關資訊的角色,成為導遊或虛擬機器人。Move AI 透過 Move One 應用程式,做到只用一具攝影機便能完成動作捕捉作業,而 Move One 應用程式可用於生成 3D 角色動畫,然後可以將其匯出到 OpenUSD,並且在 Omniverse 中使用。
Omniverse 使用者現在可以建立相容於其他基於 OpenUSD 的空間運算平台(例如ARKit及 RealityKit)的內容、體驗和應用程式。而新加入支援 Khronos Group 的 OpenXR 開放標準,將 Omniverse 的使用範圍擴大到 HTC VIVE、Magic Leap 及 Varjo 等頭戴式裝置製造商的多款產品上。
SideFX Houdini 的使用者現在還能直接將 Houdini 的數位資產載入 Omniverse 的檢視畫面,讓執行基於 Houdini 且與 Omniverse 相連的工作流程更加流暢。Cesium 所提供Omniverse 的擴充項目名為 Cesium for Omniverse,支援在虛擬環境中以串流方式傳輸大量地理空間資料集的開放標準 3D Tiles,包括 OpenUSD 支援的資料集。CGI.Backgrounds現在在USD Composer中提供多個超高清HDRi地圖。使用者現在可以在 Omniverse 平台上使用 Cadence DataCenter Design Software™,幫助使用者在其數位孿生的完整環境中查看計算流體動力學模擬內容。而使用者使用 Cadence 資料中心擴充項目,可以在實行前規畫、測試和驗證設計及操作注意事項。 Blackshark.AI 的世界數位孿生平台現已與 Omniverse 串連。
從汽車到機器人產業,借助 OpenUSD 與 Omniverse 打造更精美的視覺
客戶使用 Omniverse 來執行從模擬機器人、訓練人工智慧模型及製作更精美動畫的各種工作。波士頓動力人工智慧研究所(Boston Dynamics AI Institute)使用 Omniverse 來模擬機器人及其與環境的互動情況,以設計新型機器人和控制系統。汽車與自主系統工業化領域龍頭之一的大陸集團(Continental),將 Omniverse 用於旗下的行動機器人業務,大規模產生精準符合物理原理的合成資料,以訓練電腦視覺人工智慧模型與執行系統整合測試。
Volvo Cars 已將其數位孿生模型變成基於 OpenUSD 的內容,使用 Omniverse 建立身臨其境的視覺效果,幫助網購客戶做出決定。品牌設計和體驗代理商 Marks Design 使用 Omniverse 和 OpenUSD來簡化協作並改進其動畫、可視化和渲染工作流程。
新的 Omniverse 系統及合作夥伴
NVIDIA 攜手全球系統製造商,將針對 Omniverse 打造出最佳配置的RTX工作站產品給數百萬名設計師、建築師和工程師使用。新系統將搭載多達四個 NVIDIA RTX 6000 Ada 世代 GPU,搭配 NVIDIA Omniverse Enterprise 軟體,可加速推動建立 OpenUSD 世界、生成式人工智慧增強型協作設計和其他工業數位化應用項目。
Omniverse 使用者還可以利用新款功能強大的通用資料中心顯示卡 NVIDIA L40S GPU,可加速處理圖形密集型工作負載。最新版Omniverse 已以 beta 版開放使用,並即將於 Omniverse Enterprise 提供。
本文經 NVIDIA 授權發布,內容僅有做字詞修改。如需轉載請標明出處。