如何推動(dòng)VR走向下一代,達(dá)到全新沉浸感、逼真感
在過(guò)去數(shù)十年里,VR體驗(yàn)已經(jīng)從科幻小說(shuō)和研究實(shí)驗(yàn)室走向了家庭和辦公室。但即便是今天最佳的VR體驗(yàn)都尚未實(shí)現(xiàn)完全的沉浸感。
英偉達(dá)最新的圖靈顯卡有望幫助VR朝向這個(gè)目標(biāo)邁進(jìn)一大步。英偉達(dá)在上周的SIGGRAPH大會(huì)和今天的科隆游戲展上宣布,圖靈顯卡將實(shí)時(shí)光線追蹤、人工智能和全新渲染技術(shù)相結(jié)合,推動(dòng)VR達(dá)到新的沉浸感和逼真感。
1. 實(shí)時(shí)光線追蹤
圖靈通過(guò)引入RT核心而實(shí)現(xiàn)了逼真的視覺(jué)保真度。這種處理器專門(mén)用于加速光線與環(huán)境中對(duì)象相交位置的計(jì)算,從而首次在游戲和應(yīng)用程序中實(shí)現(xiàn)實(shí)時(shí)光線追蹤。
這種光學(xué)計(jì)算復(fù)制了光線的行為方式,并創(chuàng)建了令人驚嘆的逼真圖像,能夠支持VR開(kāi)發(fā)者更好地模擬真實(shí)世界的環(huán)境。
圖靈的RT核心同時(shí)能夠通過(guò)NVIDIA VRWorks Audio SDK來(lái)模擬聲音。今天的VR體驗(yàn)提供了位置準(zhǔn)確的音頻質(zhì)量。但它們無(wú)法滿足計(jì)算需求,無(wú)法充分反映環(huán)境的大小、形狀和材質(zhì)特性,尤其是動(dòng)態(tài)方面。
與前一代相比,WRWorks Audio能夠在RTX平臺(tái)提速6倍。光線追蹤的音頻技術(shù)能夠?qū)崟r(shí)創(chuàng)建虛擬環(huán)境的物理逼真聲學(xué)圖像。
在SIGGRAPH大會(huì)上,英偉達(dá)演示了VRWorks Audio與NVIDIA Holodeck的集成,說(shuō)明了技術(shù)是如何在開(kāi)發(fā)復(fù)雜虛擬環(huán)境時(shí)創(chuàng)建更逼真的音頻,并且加快音頻工作流程。
2. 人工智能加速VR環(huán)境
深度學(xué)習(xí)是一種GPU加速的AI方法,其有潛能解決VR面臨的一些視覺(jué)和感知挑戰(zhàn)。人工智能可以進(jìn)一步增強(qiáng)圖形,可以改善位置追蹤和 眼動(dòng)追蹤 ,并且提高角色動(dòng)畫(huà)的真實(shí)感。
圖靈架構(gòu)的Tensor Core可以每秒提供高達(dá)500萬(wàn)億個(gè)張量(Tensor)操作,加速推理并在高級(jí)渲染技術(shù)中啟用AI,從而令虛擬環(huán)境更加逼真。
3. 更先進(jìn)的VR渲染技術(shù)
圖靈同時(shí)搭載了一系列的渲染技術(shù),能夠提高VR的性能和視覺(jué)質(zhì)量。
Variable Rate Shading(VRS,可變速率著色)能夠優(yōu)化渲染。主要方法是在場(chǎng)景的詳細(xì)區(qū)域中應(yīng)用更多著色性能,并在較少可感知細(xì)節(jié)的場(chǎng)景中限制計(jì)算。這可以降低場(chǎng)景外圍區(qū)域的著色率(用戶不太可能留意的區(qū)域,尤其是當(dāng)與眼動(dòng)追蹤相結(jié)合時(shí)),從而用于注視點(diǎn)渲染。
Multi-View Rendering(多視圖渲染)能夠支持提供超寬視場(chǎng)和斜面顯示屏的下一代頭顯,這樣用戶就能感知一個(gè)無(wú)邊框的虛擬世界。Multi-View Rendering(多視角渲染)是Single Pass Stereo(單通道立體視覺(jué))的下一代版本,可以將單個(gè)渲染通道的投影視圖數(shù)量增加四倍。而且這四倍的視圖現(xiàn)在都獨(dú)立于位置,并且能夠沿任何軸移動(dòng)。通過(guò)渲染四個(gè)投影視圖,系統(tǒng)可以加速搭載極寬視場(chǎng)的斜面(非共面)頭顯。
4. 更方便的VR連接性
圖靈是英偉達(dá)首款支持USB Type-C和VirtualLink的顯卡系列。對(duì)于VirtualLink,這是旨在通過(guò)單條輕量級(jí)USB-C數(shù)據(jù)線來(lái)驅(qū)動(dòng)下一代VR頭顯的全新開(kāi)放行業(yè)標(biāo)準(zhǔn)。
今天的VR頭顯在設(shè)置上十分復(fù)雜,涉及多條笨重的數(shù)據(jù)線。VirtualLink通過(guò)一根數(shù)據(jù)線來(lái)提供電源、顯示和數(shù)據(jù),同時(shí)包含大量帶寬以滿足未來(lái)頭顯的需求,從而簡(jiǎn)化了VR設(shè)置過(guò)程。單條連接器同時(shí)可以將VR帶向較小的設(shè)備,如輕薄型筆記本電腦,后者只提供一個(gè)小巧的USB-C連接器。
文章來(lái)源:映維網(wǎng) 如轉(zhuǎn)載請(qǐng)標(biāo)明出處
原文鏈接 : https://yivian.com/news/49496.html
未經(jīng)授權(quán),禁止轉(zhuǎn)載,違者必將追究法律責(zé)任。