Holosuit套裝結(jié)合AR和VR實(shí)現(xiàn)全身動作追蹤,感受科技如此強(qiáng)大
全身追蹤曾經(jīng)只出現(xiàn)在電影工作室和主題公園內(nèi),但是由于低成本的運(yùn)動傳感器、陀螺儀和加速度計的普及,全身追蹤終于開始慢慢進(jìn)入消費(fèi)者領(lǐng)域。Trackstrap銷售的產(chǎn)品與HTC Vive虛擬現(xiàn)實(shí)(VR)頭顯兼容,動作捕捉套件Perception Neuron也是如此。在大多數(shù)情況下,捕捉關(guān)節(jié)和肌肉的運(yùn)動都和在好萊塢電影中的一樣。
麻煩的是,這套設(shè)備在設(shè)計時就考慮了固定的設(shè)置。如果你選擇的VR或AR平臺恰好是移動先行的,比如谷歌的Daydream View、三星的Gear VR或Facebook的Oculus Go,那你就不太走運(yùn)了。
前微軟工程師Harsha Kikkeri從中受到啟發(fā),開始了自己的研發(fā)設(shè)計。他在之前曾幫助西雅圖公司開發(fā)出了Kinect動作跟蹤傳感器,希望能夠使一切變得更加靈活?,F(xiàn)在,他的解決方案就是HoloSuit。這是一款獲得專利的全身跟蹤器,包括一件外套、一副手套和一條褲子。裝備內(nèi)包含內(nèi)置式傳感器、觸覺反饋設(shè)備及可編程按鈕,這些傳感器可以跟蹤運(yùn)動,觸覺反饋設(shè)備可以提供力量反饋,可編程按鈕可以與電腦、智能手機(jī)、可穿戴設(shè)備和平板電腦相連接進(jìn)行控制。
Kikkeri稱之為“現(xiàn)實(shí)世界的運(yùn)動跟蹤”。
“隨著分辨率和視場的提高,延遲的降低,VR和AR技術(shù)變得更加深入、更加自然?!盞ikkeri說,“我們從頭開始設(shè)計HoloSuit,以期為用戶提供一種無與倫比的、沉浸式的AR/VR/MR體驗(yàn),這種體驗(yàn)還是全身型的和雙向的?!?/p>
HoloSuit套裝現(xiàn)在即可在Kickstarter上購買,但是要到今年晚些時候才開始發(fā)貨。本月,我在紐約市已經(jīng)提前一睹風(fēng)采了。
全身追蹤當(dāng)我走進(jìn)一間鑲有木板的會議室時,這間會議室是為我的演示而預(yù)訂的,Kikkeri熱情地和我打招呼。只要稍微留意,就會發(fā)現(xiàn)兩側(cè)各有兩個運(yùn)動跟蹤基站,旁邊的桌子上放著一臺游戲筆記本電腦。
他穿的是HoloSuit Pro,這是兩款現(xiàn)有版本中價格比較高的一款。HoloSuit Pro共有36個嵌入式運(yùn)動傳感器(9個在夾克上,22個在手套上,7個在褲子上),9個觸覺反饋設(shè)備和6個可編程按鈕。另一個價格低一點(diǎn)的版本有26個運(yùn)動傳感器。它通過藍(lán)牙或Wi-Fi連接向PC或移動設(shè)備提供源源不斷的角度、加速度和力量數(shù)據(jù)。Kikkeri告訴我,HoloSuit與Android、iOS和Windows系統(tǒng)都兼容, 而且OS X支持即將到來。
Kikkeri說,為流行的游戲引擎(包括Unity和Unreal引擎)開發(fā)硬件、軟件開發(fā)工具包和插件,總共花了他5年的時間。而且?guī)缀鮄oloSuit套裝上的所有元素都是內(nèi)部設(shè)計和制作的,就連夾克的紡織工作都是由他們內(nèi)部完成。
Kikkeri不是一個喜歡浪費(fèi)時間的人。他用他最喜歡的一個設(shè)備——第三方的數(shù)字化身查看器開始了他的演示。當(dāng)他的右手慢慢向上移動時,電腦上的數(shù)字化身右手也在慢慢向上移動。當(dāng)他從一邊轉(zhuǎn)向另一邊時,化身也圍繞著軸旋轉(zhuǎn)。
HoloSuit的延遲如此之低,令我感到震撼,因?yàn)镵ikkeri的動作幾乎同時就在電腦上得到反映。除了低延遲,它的高保真度也打動了我。即使是非常輕微的動作,比如輕拍手腕或聳聳肩,也逃不過傳感器的捕捉。
Kikkeri說,這種超高的準(zhǔn)確度使HoloSuit成為VR的理想選擇,因?yàn)樗梢允褂脩粲猩砼R其境的感覺,令人難以置信。他設(shè)計的原型的第一次演示是一個潛艇模擬器,在一個狹小的控制室里,用操作旋鈕、按鈕和杠桿對玩家進(jìn)行任務(wù)。這套裝備的按鈕在這里派上了用場:在演示過程中,Kikkeri用一枚縫在手套上的按鈕作為選擇工具。在Windows機(jī)器上,這枚按鈕還能充當(dāng)鼠標(biāo)左鍵?,F(xiàn)在,HoloSuit團(tuán)隊正在開發(fā)通用輸入驅(qū)動程序。
HoloSuit還可以控制現(xiàn)實(shí)世界中的物體,比如人形機(jī)器人:
但是,HoloSuit不是對所有的潛水導(dǎo)彈發(fā)射器和機(jī)器人都適用。
下一次演示是Unity中創(chuàng)建的板球模擬器。板球是印度最受歡迎的運(yùn)動項(xiàng)目之一,而且研發(fā)出HoloSuit的初創(chuàng)公司Kaaya Tech的總部就設(shè)在這里。當(dāng)我穿上HoloSuit外套時,它舒適地貼在我的紐扣式連衣裙上。Kikkeri在我手腕上系上了縫合的尼龍搭扣帶,以確保追蹤盡可能準(zhǔn)確。然后,我——或者更確切地說,我的數(shù)字化身——就登場了。
我在高中時曾經(jīng)打過棒球,但這已經(jīng)過去很長時間了,于是,板球在我的化身面前呼嘯而過,次數(shù)多到我數(shù)不清。必須要提醒一下,這并不是HoloSuit的錯,它很好地跟蹤了我抖動的手臂,而且它的觸覺反饋設(shè)備將我的每一次揮拍和失誤都進(jìn)行了反饋。
Kikkeri說這個演示曾經(jīng)啟發(fā)了一位前板球教練去創(chuàng)建一個虛擬訓(xùn)練程序。
我讓Kikkeri演示了另外兩個:HoloSuit Golf和HoloSuit Yoga。前者分析穿著裝備時高爾夫擊球的情況。它甚至還有一個超棒的云功能,可以讓使用者的數(shù)據(jù)備份保存到云端,并與他人分享,他人可以360度全方位地觀看視頻。而后者,正如你所預(yù)料的那樣,用于向像我這樣的業(yè)余愛好者教授復(fù)雜的姿勢。當(dāng)佩戴者犯錯時,HoloSuit的觸覺反饋系統(tǒng)就會發(fā)出震動。
HoloSuit無處不在Kikkeri認(rèn)為HoloSuit的潛力遠(yuǎn)遠(yuǎn)超出了視頻游戲和虛擬現(xiàn)實(shí),為此,Kaaya Tech正在探索醫(yī)療保健、工廠培訓(xùn)和教育方面的應(yīng)用。它已經(jīng)與班加羅爾的一家康復(fù)診所合作進(jìn)行數(shù)字培訓(xùn);還和一位寶萊塢音樂導(dǎo)演合作在羅馬尼亞創(chuàng)建一個虛擬管弦樂隊和獨(dú)特的博物館體驗(yàn);在越南的一所大學(xué)進(jìn)行外科訓(xùn)練;還和印度國防研究和發(fā)展組織合作制定災(zāi)難應(yīng)對計劃。
在未來,Kikkeri認(rèn)為HoloSuit還可以用來監(jiān)控醫(yī)院里的病人或者教學(xué)生關(guān)于機(jī)器人的應(yīng)用。這些應(yīng)用只是冰山一角——他的團(tuán)隊正在創(chuàng)建一個軟件開發(fā)工具包,將HoloSuit得到的人體運(yùn)動數(shù)據(jù)與通過攝像頭捕捉到的面部動作相結(jié)合。此外,他們還在和微軟的HoloLens一起合作設(shè)計一款A(yù)R應(yīng)用程序。
Kaaya Tech的計劃雄心勃勃,但實(shí)際上HoloSuit的技術(shù)并不便宜。兩套HoloSuit套裝中較便宜的一套價格都達(dá)到1000美元,另一款高端機(jī)型售價高達(dá)1600美元。
Kikkeri指出,HoloSuit的一些競爭對手,比如Teslasuit,價格比HoloSuit還要高,是它的4到5倍。而且HoloSuit適用所有VR和AR平臺。不過,不管你怎么想,價格都很難以令廣大消費(fèi)者接受。
但是Kaaya Tech正在進(jìn)行一場持久戰(zhàn)。Kikkeri指出,最近的一項(xiàng)研究表明,AR和VR市場在2020年將達(dá)到1620億美元,遠(yuǎn)遠(yuǎn)高于2016年的52億美元。
“控制器仍然是復(fù)合現(xiàn)實(shí)的致命缺點(diǎn),就像阿喀琉斯之踵。笨重而且不自然的手持設(shè)備只能在有限的范圍內(nèi)跟蹤你的手部運(yùn)動?!彼f,“HoloSuit則遠(yuǎn)遠(yuǎn)超越了游戲,它的力量是如此強(qiáng)大,可以用于現(xiàn)實(shí)生活中的關(guān)鍵任務(wù),如教育,神經(jīng)康復(fù),戰(zhàn)斗訓(xùn)練,手術(shù),甚至是電影制作。”