HTC 旗下沉浸式 XR 開放平台 VIVERSE,今日於美國丹佛舉行的全球頂尖電腦繪圖大會-SIGGRAPH 2024 上宣布與 NVIDIA 合作展示,將 NVIDIA ACE 技術整合至 VIVERSE Avatar 中,增強用戶在 XR 延展實境中的互動真實感,推動全新 XR 虛擬化身相關應用。
HTC 於 SIGGRAPH 2024 宣布將與NVIDIA 合作,展示 VIVERSE Polygon Streaming 技術
VIVERSE Avatar 是一個開放式的虛擬化身創建系統,不僅提供多種全身虛擬形象風格,還支援VRM 標準,允許用戶導入 VRM 3D 模型虛擬形象,在 VIVERSE 中創建自己的身份。
NVIDIA ACE(Avatar Cloud Engine)則是一套可以將虛擬化身變得栩栩如生,賦予數位人類充滿生命力的技術。其中 NVIDIA Audio2Face NIM 微服務,可根據語音語調搭配出豐富的臉部表情。在本次 SIGGRAPH 2024 大會的 NVIDIA 新創企業創新展區( Inception Startups Innovation Zone),參觀者透過 VIVE XR Elite 體驗 ACE NIM 與 VIVERSE Avatar 即時整合展示。
Audio2Face NIM 微服務支援多種語言,可應用於從卡通到寫實等各種虛擬形象風格。這種多樣靈活性與 VIVERSE 的開放平台方法相契合,允許用戶使用開放的 VRM 標準導入虛擬化身,或者從頭創建自己的卡通虛擬人物。透過 Audio2Face NIM 集成至 VIVERSE Avatar 中,團隊可以更自然地協作互動,減少遠程工作中的溝通問題。
除此之外 HTC 在大會上還展示了另一項突破性技術-獨家 3D 渲染技術 VIVERSE Polygon Streaming。 VIVERSE Polygon Streaming 能為用戶提供低延遲、高保真 3D 渲染串流體驗,即使在大型 3D 場景中,也能享有精緻流暢的虛擬互動體驗。
VIVERSE Polygon Streaming 服務技術可高效渲染及快速拆解高品質 3D 模型,在不損失細節的情況下自動優化圖像,協助在電腦、平板、手機和 XR 等跨裝置上進行即時 3D 渲染。
Polygon Streaming 能夠在不同裝置上無縫渲染高解析度的 3D 模型,降低了對硬體的依賴,即使是手機使用者也能享受絕佳體驗。
經過實際測試,Polygon Streaming 能夠達到:
- 物件載入時間最多減少 8 倍
- 平均每秒幀數(FPS)最多增加 2 倍,讓畫面更加生動逼真
- 讓專案的檔案大小最多減少 81%
對 VIVERSE Polygon Streaming 實際範例感興趣的朋友可以前往 Model Preview (viverse.com)了解更多細節。