Adobe又出新招，360度視頻直接轉(zhuǎn)換為VR視頻，用戶體驗(yàn)更加驚喜！
Adobe的研究主管Gavin Miller在本周二拉斯維加斯的NAB上呈現(xiàn)新的尖端技術(shù)，未來這一技術(shù)可以用于將消費(fèi)級(jí)球面攝像機(jī)拍攝的平面、單視角的360度視頻完全融入VR視頻，改進(jìn)融入視頻的能力，業(yè)內(nèi)人士稱之為六自由度（6DoF）。
單視角的360度視頻和提供六自由度VR體驗(yàn)的差異對(duì)于像Oculus Rift和HTC Vive這樣的高端VR頭顯用戶尤其重要。這些頭顯具有房間追蹤功能，這意味著頭顯知道觀察者在房間中的哪個(gè)位置，針對(duì)諸如“向前傾斜”這樣的動(dòng)作準(zhǔn)確地提供相應(yīng)的視覺效果。
計(jì)算機(jī)生成的圖像能夠相對(duì)容易地實(shí)現(xiàn)這一效果，但是考慮到在錄制視頻的過程中，觀察者可以自由移動(dòng)，所以需要前沿的圖像捕獲技術(shù)。比如光場(chǎng)相機(jī)系統(tǒng)，Lytro曾經(jīng)開發(fā)過的的一個(gè)系統(tǒng)，可能花費(fèi)了數(shù)十萬美元。
然而，Adobe的科學(xué)家已經(jīng)找出了一種方法，他們用一種被稱為“運(yùn)動(dòng)恢復(fù)結(jié)構(gòu)（structure-from-moTIon）”的算法分析鏡頭的移動(dòng)，來推斷關(guān)于房間的關(guān)鍵信息。
接下來，該數(shù)據(jù)可用于生成新的視角來應(yīng)對(duì)不同的觀察角度，為觀察者提供真正融入視頻的能力，即使是非3D的視頻。該技術(shù)還可用于將360度視頻變得更加穩(wěn)定，或生成不同版本的視頻，為偏好不同運(yùn)動(dòng)舒適度的用戶提供服務(wù)。
這種方法有一個(gè)很大的問題：為平面的360度視頻添加六自由度只在鏡頭實(shí)際移動(dòng)時(shí)才起作用。Miller解釋說：“我們通過假設(shè)相機(jī)移動(dòng)來推斷深度。如果相機(jī)在旋轉(zhuǎn)卻不從一邊移動(dòng)到另一邊，我們無法計(jì)算深度，但可以使旋轉(zhuǎn)穩(wěn)定。
盡管如此，這種方法表明，搭建復(fù)雜攝像機(jī)并不是VR視頻進(jìn)步的唯一解決方案。計(jì)算機(jī)視覺算法同樣重要，Miller甚至認(rèn)為在生成完全身臨其境的VR視頻的過程中，可能根本不需要昂貴的攝像頭硬件。他說：“有當(dāng)然好，但如果沒有這個(gè)硬件，也不是不能做到。”
Miller將在本周二NAB的小組討論上展示下一代圖像生成的研究結(jié)果，同時(shí)Light Field Lab的CEO Jon Karafin也將在會(huì)上談?wù)撓乱淮@示技術(shù)。
下載文檔
