美國(guó)夏威夷召開(kāi)的高通驍龍技術(shù)峰會(huì)進(jìn)入第三天,擴(kuò)展現(xiàn)實(shí)(XR)成為了今天的主題詞。在今天的主題演講中,高通發(fā)布了全球首款支持5G的擴(kuò)展現(xiàn)實(shí)
美國(guó)夏威夷召開(kāi)的高通驍龍技術(shù)峰會(huì)進(jìn)入第三天,擴(kuò)展現(xiàn)實(shí)(XR)成為了今天的主題詞。在今天的主題演講中,高通發(fā)布了全球首款支持5G的擴(kuò)展現(xiàn)實(shí)(XR)平臺(tái)——驍龍XR 2,結(jié)合了高通5G、AI和XR領(lǐng)域的最新技術(shù),并支持諸多定制特性。
XR技術(shù)即增強(qiáng)現(xiàn)實(shí)(AR)、虛擬現(xiàn)實(shí)(VR)和混合現(xiàn)實(shí)(MR)的總稱,是5G移動(dòng)通信的最直接應(yīng)用領(lǐng)域之一。舉例來(lái)說(shuō),索尼PSVR、HTC Vive和Facebook的Oculus頭戴設(shè)備屬于虛擬現(xiàn)實(shí),谷歌眼鏡屬于增強(qiáng)現(xiàn)實(shí),而微軟Hololens系列設(shè)備則屬于混合現(xiàn)實(shí)。
相比此前的驍龍XR平臺(tái),XR2平臺(tái)在進(jìn)入5G時(shí)代后實(shí)現(xiàn)了巨大升級(jí):CPU和GPU性能提升了兩倍,視頻帶寬提升了四倍,分辨率提升了6倍,AI性能提升了11倍。此外,XR 2還是全球首個(gè)支持七路并行攝像頭且具備計(jì)算機(jī)視覺(jué)專用處理器的XR平臺(tái),是全球首個(gè)通過(guò)支持低時(shí)延攝像頭透視技術(shù)實(shí)現(xiàn)真正MR體驗(yàn)的XR平臺(tái)。
作為全球首個(gè)支持5G連接的XR平臺(tái),驍龍XR 2實(shí)現(xiàn)了需要低時(shí)延和超高數(shù)據(jù)速率的體驗(yàn),從而有望真正推動(dòng)XR體驗(yàn)普及。得益于5G連接,新的XR設(shè)備能夠通過(guò)支持終端和邊緣云之間的分離式處理,營(yíng)造逼真的高品質(zhì)體驗(yàn),從而擺脫任何線纜或空間的束縛。
在AI和5G連接兩大技術(shù)提升之外,XR 2平臺(tái)還在視覺(jué)、交互和音頻技術(shù)進(jìn)行了定制優(yōu)化,以滿足真正沉浸式的XR體驗(yàn)需求。
在視覺(jué)體驗(yàn)方面,XR 2平臺(tái)的GPU處理能力提升了兩倍,可以以1.5倍像素填充率和3倍紋理速率實(shí)現(xiàn)高效高品質(zhì)的圖形渲染。支持眼球追蹤的視覺(jué)聚焦渲染,支持更流暢刷新率的增強(qiáng)可變速率著色,可以在渲染重負(fù)載工作的同時(shí)保持低功耗。XR2的顯示單元可以支持高達(dá)90fps的3Kx3K單眼分辨率,也是首個(gè)在流傳輸和本地播放中支持60fps的8K 360度視頻。
在交互體驗(yàn)方面,XR 2平臺(tái)引入了七路并行攝像頭支持和定制化的計(jì)算機(jī)視覺(jué)處理器,可以高度精確的實(shí)時(shí)追蹤用戶的頭部、嘴唇和眼球,支持26點(diǎn)手部骨骼追蹤。計(jì)算機(jī)視覺(jué)技術(shù)提供高效場(chǎng)景理解和3D重建。
在音頻方面,驍龍XR2平臺(tái)可以在3D空間音效中提供全新水平的音頻層,同時(shí)提供清晰的語(yǔ)音交互以深化沉浸感。低功耗的高通Hexagon DSP芯片將始終開(kāi)啟,支持語(yǔ)音激活和情境偵測(cè)等硬件加速特性,使得用戶在沉浸數(shù)字世界的同時(shí)也聽(tīng)到真實(shí)世界的聲音。(鄭峻)