全身追蹤曾經(jīng)只出現(xiàn)在電影工作室和主題公園內(nèi),但是由于低成本的運動傳感器、陀螺儀和加速度計的普及,全身追蹤終于開始慢慢進(jìn)入消費者領(lǐng)域。Trackstrap銷售的產(chǎn)品與HTC Vive虛擬現(xiàn)實(VR)頭顯兼容,動作捕捉套件Perception Neuron也是如此。在大多數(shù)情況下,捕捉關(guān)節(jié)和肌肉的運動都和在好萊塢電影中的一樣。
麻煩的是,這套設(shè)備在設(shè)計時就考慮了固定的設(shè)置。如果你選擇的VR或AR平臺恰好是移動先行的,比如谷歌的Daydream View、三星的Gear VR或Facebook的Oculus Go,那你就不太走運了。
前微軟工程師Harsha Kikkeri從中受到啟發(fā),開始了自己的研發(fā)設(shè)計。他在之前曾幫助西雅圖公司開發(fā)出了Kinect動作跟蹤傳感器,希望能夠使一切變得更加靈活。現(xiàn)在,他的解決方案就是HoloSuit。這是一款獲得專利的全身跟蹤器,包括一件外套、一副手套和一條褲子。裝備內(nèi)包含內(nèi)置式傳感器、觸覺反饋設(shè)備及可編程按鈕,這些傳感器可以跟蹤運動,觸覺反饋設(shè)備可以提供力量反饋,可編程按鈕可以與電腦、智能手機(jī)、可穿戴設(shè)備和平板電腦相連接進(jìn)行控制。
Kikkeri稱之為“現(xiàn)實世界的運動跟蹤”。“隨著分辨率和視場的提高,延遲的降低,VR和AR技術(shù)變得更加深入、更加自然。”Kikkeri說,“我們從頭開始設(shè)計HoloSuit,以期為用戶提供一種無與倫比的、沉浸式的AR/VR/MR體驗,這種體驗還是全身型的和雙向的。”
HoloSuit套裝現(xiàn)在即可在Kickstarter上購買,但是要到今年晚些時候才開始發(fā)貨。本月,我在紐約市已經(jīng)提前一睹風(fēng)采了。
全身追蹤當(dāng)我走進(jìn)一間鑲有木板的會議室時,這間會議室是為我的演示而預(yù)訂的,Kikkeri熱情地和我打招呼。只要稍微留意,就會發(fā)現(xiàn)兩側(cè)各有兩個運動跟蹤基站,旁邊的桌子上放著一臺游戲筆記本電腦。
他穿的是HoloSuit Pro,這是兩款現(xiàn)有版本中價格比較高的一款。HoloSuit Pro共有36個嵌入式運動傳感器(9個在夾克上,22個在手套上,7個在褲子上),9個觸覺反饋設(shè)備和6個可編程按鈕。另一個價格低一點的版本有26個運動傳感器。它通過藍(lán)牙或Wi-Fi連接向PC或移動設(shè)備提供源源不斷的角度、加速度和力量數(shù)據(jù)。Kikkeri告訴我,HoloSuit與Android、iOS和Windows系統(tǒng)都兼容, 而且OS X支持即將到來。
Kikkeri說,為流行的游戲引擎(包括Unity和Unreal引擎)開發(fā)硬件、軟件開發(fā)工具包和插件,總共花了他5年的時間。而且?guī)缀鮄oloSuit套裝上的所有元素都是內(nèi)部設(shè)計和制作的,就連夾克的紡織工作都是由他們內(nèi)部完成。
Kikkeri不是一個喜歡浪費時間的人。他用他最喜歡的一個設(shè)備——第三方的數(shù)字化身查看器開始了他的演示。當(dāng)他的右手慢慢向上移動時,電腦上的數(shù)字化身右手也在慢慢向上移動。當(dāng)他從一邊轉(zhuǎn)向另一邊時,化身也圍繞著軸旋轉(zhuǎn)。
HoloSuit的延遲如此之低,令我感到震撼,因為Kikkeri的動作幾乎同時就在電腦上得到反映。除了低延遲,它的高保真度也打動了我。即使是非常輕微的動作,比如輕拍手腕或聳聳肩,也逃不過傳感器的捕捉。
Kikkeri說,這種超高的準(zhǔn)確度使HoloSuit成為VR的理想選擇,因為它可以使用戶有身臨其境的感覺,令人難以置信。他設(shè)計的原型的第一次演示是一個潛艇模擬器,在一個狹小的控制室里,用操作旋鈕、按鈕和杠桿對玩家進(jìn)行任務(wù)。這套裝備的按鈕在這里派上了用場:在演示過程中,Kikkeri用一枚縫在手套上的按鈕作為選擇工具。在Windows機(jī)器上,這枚按鈕還能充當(dāng)鼠標(biāo)左鍵?,F(xiàn)在,HoloSuit團(tuán)隊正在開發(fā)通用輸入驅(qū)動程序。
HoloSuit還可以控制現(xiàn)實世界中的物體,比如人形機(jī)器人:但是,HoloSuit不是對所有的潛水導(dǎo)彈發(fā)射器和機(jī)器人都適用。
下一次演示是Unity中創(chuàng)建的板球模擬器。板球是印度最受歡迎的運動項目之一,而且研發(fā)出HoloSuit的初創(chuàng)公司Kaaya Tech的總部就設(shè)在這里。當(dāng)我穿上HoloSuit外套時,它舒適地貼在我的紐扣式連衣裙上。Kikkeri在我手腕上系上了縫合的尼龍搭扣帶,以確保追蹤盡可能準(zhǔn)確。然后,我——或者更確切地說,我的數(shù)字化身——就登場了。
我在高中時曾經(jīng)打過棒球,但這已經(jīng)過去很長時間了,于是,板球在我的化身面前呼嘯而過,次數(shù)多到我數(shù)不清。必須要提醒一下,這并不是HoloSuit的錯,它很好地跟蹤了我抖動的手臂,而且它的觸覺反饋設(shè)備將我的每一次揮拍和失誤都進(jìn)行了反饋。