高通首次展示下一代VR技術(shù):可感知和回饋景深
迄今超過40年歷史的計(jì)算視覺和互動(dòng)技術(shù)大會(huì)(SIGGRAPH)是各家廠商展現(xiàn)最新硬件和技術(shù)的平臺(tái),隨著虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)概念在近年的興起,該展會(huì)上的主題和重點(diǎn)也轉(zhuǎn)向這些領(lǐng)域。
在今年的SIGGRAPH上,移動(dòng)芯片巨頭高通展示了一系列其芯片技術(shù)運(yùn)用于計(jì)算機(jī)圖形領(lǐng)域的最新成果和進(jìn)展,主要體現(xiàn)在游戲畫面表現(xiàn)、電腦視覺和虛擬/增強(qiáng)現(xiàn)實(shí)應(yīng)用三個(gè)方面。
高通產(chǎn)品管理副總裁TIm Leland介紹說,目前市面上主流的VR硬件設(shè)備分為三類,一類是作為電腦外接設(shè)備的頭戴虛擬現(xiàn)實(shí)顯示器、一類是插入智能手機(jī)的移動(dòng)式頭戴顯示設(shè)備,第三類是內(nèi)含獨(dú)立獨(dú)立器單元的移動(dòng)式頭戴顯示設(shè)備。
高通主要專注于為后兩類VR設(shè)備提供芯片和技術(shù)支持,Leland在接受記者采訪時(shí)表示,高通認(rèn)為長遠(yuǎn)來看,移動(dòng)式VR設(shè)備是未來虛擬現(xiàn)實(shí)硬件設(shè)備發(fā)展的趨勢。
但目前第一類VR設(shè)備還將與后兩類VR設(shè)備在市場中長期共存,滿足不同的應(yīng)用需求。第一類主要滿足了大型VR游戲,但缺點(diǎn)是必須連接性能強(qiáng)勁的電腦。后兩類具備了移動(dòng)的便攜性,但性能相對偏弱。
但 Leland對記者表示,對于性能的差異,實(shí)際上應(yīng)該從用戶體驗(yàn)的角度來理解。單純對比連接PC的VR設(shè)備和移動(dòng)VR設(shè)備,顯然處理器的性能前者要遠(yuǎn)高于后者,但后者由于都是在本地進(jìn)行即時(shí)畫面和動(dòng)作捕捉處理,因而在延遲上要比前者好得多,未來隨著芯片技術(shù)的不斷發(fā)展,將在圖像精細(xì)度、畫面質(zhì)量等方面進(jìn)一步提高。
在SIGGRAPH期間,高通展臺(tái)上用于展示的設(shè)備,無論是目前市面上能夠見到的移動(dòng)設(shè)備還是原型機(jī),幾乎都使用了高通目前性能最為強(qiáng)勁的驍龍820芯片。
記者在現(xiàn)場試戴了基于高通驍龍820芯片的下一代Gear VR原型機(jī),該原型機(jī)與目前市面上的Gear VR產(chǎn)品相比最大的改進(jìn)在于外部嵌入了用于獲取景深的攝像頭,結(jié)合該攝像頭后,佩戴該Gear VR原型機(jī)的體驗(yàn)者在真實(shí)空間進(jìn)行的移動(dòng),也能夠反映在其能夠看到的虛擬影像上,實(shí)現(xiàn)高通所謂的“六向移動(dòng)”體驗(yàn),而目前市面上的Gear VR僅能滿足“三向移動(dòng)”,即體驗(yàn)者自身在真實(shí)空間中的移動(dòng),無法在其所看到的虛擬景象上體現(xiàn)出遠(yuǎn)近的區(qū)別。
在增強(qiáng)現(xiàn)實(shí)(AR)技術(shù)方面,高通與谷歌(微博)的Project Tango項(xiàng)目緊密合作,在與谷歌聯(lián)合舉辦的一場說明會(huì)上,谷歌技術(shù)項(xiàng)目負(fù)責(zé)人Johnny Lee向我們展示了AR在未來可能的應(yīng)用場景。
目前,首個(gè)支持Project Tango技術(shù)并已經(jīng)發(fā)布的智能手機(jī)是聯(lián)想的Phab2 Pro,這款手機(jī)屏幕面積達(dá)到6.4英寸,除了傳統(tǒng)的智能手機(jī)攝像頭外,還有一枚魚眼攝像頭和一枚景深攝像頭,用于配合實(shí)現(xiàn)AR功能。
Lee在現(xiàn)場介紹了AR可應(yīng)用的場景,包括運(yùn)用于游戲領(lǐng)域的動(dòng)作捕捉、空間的三維繪圖、內(nèi)部空間導(dǎo)航、道路障礙識(shí)別等,更進(jìn)一步,由于該技術(shù)可以實(shí)時(shí)繪制空間場景,可以運(yùn)用于機(jī)器人在空間內(nèi)的活動(dòng)、避障等。
就空間位置捕捉和重構(gòu),谷歌方面稱目前仍有約1%的誤差率存在,也就是每一百米距離范圍可能會(huì)有1米左右的偏差。
Lee稱,應(yīng)用在移動(dòng)設(shè)備上的AR技術(shù),是對于硬件的要求最高的一種應(yīng)用方式,因?yàn)樵贏R技術(shù)全開時(shí),包括手機(jī)的CPU、GPU,全部的攝像頭、螺旋感應(yīng)器等幾乎所有部件都需要同時(shí)協(xié)同運(yùn)行。
為了滿足AR的應(yīng)用需求,高通在驍龍652芯片組的設(shè)計(jì)上進(jìn)行了針對性的優(yōu)化,高通的解決方案是將由感應(yīng)組件、攝像頭組件獲取的數(shù)據(jù)全部交由CPU進(jìn)行處理,解放出GPU用于處理具體應(yīng)用的指令,同時(shí)所有這些芯片的處理是以高效率能耗進(jìn)行。