在創(chuàng)建沉浸式虛擬環(huán)境時,用戶希望體驗盡可能逼真,。盡管 AIO 耳機(jī)為 VR 用戶提供了移動性和自由度,,但這些耳機(jī)并不總是具有足夠的功率,能夠以精確的物理和照明來渲染逼真的場景,。
使用云和專業(yè) GPU ,您可以為沉浸式環(huán)境生成逼真的圖形。NVIDIA CloudXR提供了兩全其美,,包括增強(qiáng)的移動性和NVIDIA RTXGPU的功能:
通過連接 NVIDIA GPU 增強(qiáng)耳機(jī)的 VR 體驗
通過 NVIDIA RTX 技術(shù),將 AI,、真實感渲染和精確物理帶入 VR 環(huán)境
通過適度的計算在設(shè)備上實現(xiàn)高質(zhì)量的顯示,,以創(chuàng)造更大的沉浸感
進(jìn)一步了解在使用 NVIDIA RTX GPU 的 PC 上構(gòu)建 XR 應(yīng)用程序時可以體驗到的三大好處。
使用高保真度模型,、幾何圖形和材質(zhì)
大多數(shù)開發(fā)人員創(chuàng)建的虛擬現(xiàn)實環(huán)境可以在任何平臺上無縫運(yùn)行,。但在許多情況下,需要更高級別的圖形逼真度,。
VR 場景的圖形質(zhì)量或復(fù)雜性對體驗的有效性有著巨大的影響,。例如,為手術(shù)室場景進(jìn)行虛擬培訓(xùn)或運(yùn)行數(shù)字孿生是非常復(fù)雜的,。這些場景中的大量物體需要只有 PC 才能提供的計算機(jī)能力,。
通過使用 GPU 創(chuàng)建這些復(fù)雜的環(huán)境,您可以將圖形體驗提升到新的水平,。在 PC 上開發(fā)應(yīng)用程序可以實現(xiàn)更高的保真度和信息深度,,以及更大的,、完全動態(tài)的環(huán)境。NVIDIA RTX 提供了速度,、性能和海量內(nèi)存的組合,,使 VR 應(yīng)用程序能夠在真實感環(huán)境中輕松處理大型復(fù)雜模型。
例如,, Brightline 的開發(fā)人員使用場景生成器創(chuàng)建了一個多用戶,、動態(tài)的培訓(xùn)系統(tǒng)。由于內(nèi)容的完全動態(tài)性和講師驅(qū)動性,,以及環(huán)境的真實性,, Brightline 的團(tuán)隊能夠使用 NVIDIA RTX ,將更多的時間集中在功能性和準(zhǔn)確性上,,而在優(yōu)化和圖形快捷方式上花費(fèi)更少的時間,,以在移動設(shè)備上可用的適度計算上達(dá)到 VR 幀速率。
Brightline 通過無線連接使用 NVIDIA CloudXR,,允許使用準(zhǔn)確和動態(tài)的照明進(jìn)行全尺寸渲染,,同時還具有 AIO 設(shè)備提供的無線自由和內(nèi)外跟蹤功能。
Brightline 首席創(chuàng)意技術(shù)專家 Jason Powers 表示:“借助 NVIDIA CloudXR,,我們能夠在邊緣利用 NVIDIA RTX GPU,,因此,使用 AIO 耳機(jī)或其他資源受限設(shè)備的用戶可以體驗到一個精確照明的動態(tài)世界,?!?/p>
使用從反射到折射的高質(zhì)量照明創(chuàng)建圖形
通過充分利用最新的 GPU、 SDK 和 API,,您可以開發(fā)具有最高視覺逼真度的應(yīng)用程序,。您可以使用高級技術(shù)(如NVIDIA DLSS和NVIDIA RTXGI)通過實時光線跟蹤創(chuàng)建具有真實照明、難以置信的反射和精確陰影的 XR 環(huán)境,。
團(tuán)隊還可以使用基于物理的渲染(PBR)著色器和材質(zhì),,使用諸如凹凸貼圖、環(huán)境光遮擋和粗糙度貼圖等技術(shù),,為生活帶來更精細(xì)的細(xì)節(jié),。通過 NVIDIA RTX 和 NVIDIA CloudXR,這些 XR 體驗可以從云端進(jìn)行流式傳輸,,因此您不必?fù)?dān)心用戶從較舊的工作站運(yùn)行體驗,。
許多開發(fā)人員已經(jīng)在使用這些技術(shù)來實現(xiàn)高質(zhì)量的圖形。例如,, Agile Lens 的團(tuán)隊依賴于虛幻引擎等強(qiáng)大的引擎,,它為 PC VR 體驗提供了高級功能。在 ViveCon 的一個項目中,, Agile Lens 為 Vive Focus 3 AIO 設(shè)備構(gòu)建了 MetaHuman 演示,。該項目包括大量的工作,,以開發(fā)一種使角色和劇院環(huán)境看起來和運(yùn)行良好的方法。但當(dāng)他們使用 NVIDIA CloudXR 時,,團(tuán)隊可以很容易地回到數(shù)字人和環(huán)境的最高質(zhì)量版本,。他們展示了兩種體驗:一種是通過本地網(wǎng)絡(luò)連接到現(xiàn)場的臺式電腦上運(yùn)行,另一種是從云端無線傳輸,。最終沒人能把這兩種區(qū)分開來,。
“從觀眾的角度來看,在虛幻引擎 5 中使用 RTXGI 和 DLSS 在高保真環(huán)境中體驗真人模擬的 MetaHumans 是一次令人驚嘆的體驗,,” Agile Lens 沉浸式設(shè)計首席執(zhí)行官 Alex Coulombe 表示,,“在開發(fā)者方面,我們可以自由地知道,,每一個觀看該節(jié)目的人都會從一臺配有NVIDIA RTX A6000的云虛擬機(jī)的完美副本中獲得他們的體驗,,這意味著強(qiáng)大的配置是唯一一個必須進(jìn)行測試的配置,任何人都不會被限制在 10 年前的筆記本電腦上運(yùn)行體驗,?!?/p>
圖片:在 Quest 和桌面 VR 上運(yùn)行的虛幻引擎 5.1 相同的 Nanite 地圖(來源:Agile Lens )開發(fā)具有增強(qiáng)的基于 AI 的交互的環(huán)境
結(jié)合 AI 和 XR,用戶可以在沉浸式環(huán)境中進(jìn)行交互,,就像在現(xiàn)實世界中一樣,。今天的開發(fā)人員正試圖準(zhǔn)確地表示沉浸式環(huán)境,,并使交互盡可能自然,,以提高用戶的舒適度和生產(chǎn)力。
Aurora 項目是專門構(gòu)建的 NVIDIA 平臺的一個例子,,其中人工智能驅(qū)動的虛擬輔助將集成在 XR 環(huán)境中,。用戶還可以與現(xiàn)實的 AI 化身進(jìn)行交互,以獲得更具吸引力的交互體驗,。借助 AI 技術(shù),,3D 角色可以看到、聽到,、理解和與人交流,。使用NVIDIA Omniverse Avatar Cloud Engine(ACE)等解決方案,您可以輕松定制和部署交互式化身,。
Omniverse ACE 是一套云原生 AI 微服務(wù),,可以更輕松地大規(guī)模構(gòu)建和部署智能虛擬助理和數(shù)字人。這些交互式化身可以為游戲,、娛樂,、交通和酒店等行業(yè)的組織設(shè)計,使團(tuán)隊能夠增強(qiáng)現(xiàn)有工作流程并打開新的商機(jī),。
未來,,基于 AI 的內(nèi)容將在 XR 體驗中變得更加突出,。從合成數(shù)據(jù)生成到圖像識別,人工智能將幫助您構(gòu)建充滿物理精確細(xì)節(jié)和照片級真實感圖形的沉浸式內(nèi)容,。新技術(shù)將使人工智能能夠更好地理解真實世界的內(nèi)容,,從而為虛擬世界創(chuàng)建合成版本。
更多信息可以來這里獲取==>>電子技術(shù)應(yīng)用-AET<<