Nebula正在會(huì)為Light AR眼鏡帶來手部追蹤功能
Nreal的3D系統(tǒng)Nebula正在迎來重大升級,它將會(huì)為Light AR眼鏡帶來手部追蹤功能,并允許用戶通過多種手勢與數(shù)字對象進(jìn)行交互,從而增強(qiáng)設(shè)備在工作環(huán)境和學(xué)習(xí)環(huán)境中的效用,并促進(jìn)用戶與朋友和家人的聯(lián)系。
Nebula系統(tǒng)的高保真手部追蹤是通過與Clay AIR的合作產(chǎn)物,后者是一家手部追蹤和手勢識別公司,致力于開發(fā)高精度且跨硬件的交互軟件,并為聯(lián)想,Bose,高通和泰雷茲集團(tuán)等客戶的光學(xué)手部追蹤解決方案提供支持。
Magic Leap 1,微軟HoloLens 2,以及現(xiàn)在的Oculus Quest都支持手部追蹤,所以Nreal明白,如果要保持市場中保持競爭力,他們同樣需要為消費(fèi)者,以及3500名正在為Nreal Light眼鏡構(gòu)建AR體驗(yàn)的開發(fā)者帶來所述功能。
為了對Nreal Light眼鏡進(jìn)行手部追蹤,Clay AIR充分利用了內(nèi)置的嵌入式空間攝像頭,將3D手部骨架模型以全高清方式疊加在物理手部。然后,系統(tǒng)將通過先進(jìn)的深度學(xué)習(xí)算法來實(shí)時(shí)追蹤和渲染手部動(dòng)作。
如果你擁有一副Nreal Light眼鏡,或者你是開發(fā)者,你首先想到的問題是原生手部追蹤將會(huì)對續(xù)航產(chǎn)生多大影響。令人驚訝的是,所述功能的耗電量并不大。你應(yīng)該不會(huì)注意到它給設(shè)備電池或任何高通驍龍855 5G智能手機(jī)造成的壓力。
Nreal將很快通過SDK啟動(dòng)為用戶帶來手部追蹤。所述功能可以輕松部署到運(yùn)行Nreal 3D系統(tǒng)的本機(jī)Android應(yīng)用,如Facebook,Spotify,Netflix和Instagram。作為開發(fā)者,你將能夠構(gòu)建包括3D手勢模型,單獨(dú)手指操作,邊界框,光標(biāo)和定制皮膚的手部追蹤體驗(yàn)。
Clay AIR提供的手勢庫將包括拿捏,指向,抓握,滑動(dòng)和縮放,以及其他一系列可自定義的選項(xiàng)。
“通過與Clay AIR合作提供手部追蹤功能,Nreal為開發(fā)者和Nreal Light Consumer Kit的用戶就如何與MR環(huán)境進(jìn)行交互提供了更高的靈活度?!惫緞?chuàng)始人兼首席執(zhí)行官徐馳表示,并進(jìn)一步補(bǔ)充說:“無論是手部追蹤,將5G智能手機(jī)用作控制器,第三方六自由度控制器,甚至是不久將來與七鑫易維合作實(shí)現(xiàn)的眼動(dòng)追蹤?!?/p>
通過將這一新功能帶到Nebula系統(tǒng),Nreal正在創(chuàng)建易于使用的硬件/軟件體驗(yàn),并進(jìn)一步簡化將AR推向大眾的過程。Clay AIR首席執(zhí)行官托馬斯·埃米利安(Thomas Amilien)指出: “無縫的手部追蹤和手勢識別技術(shù)是幫助AR在全球范圍內(nèi)實(shí)現(xiàn)普及和變得實(shí)用的必要催化劑?!?/p>
最終,這種合作伙伴關(guān)系標(biāo)志著一個(gè)重要的轉(zhuǎn)折點(diǎn):這是用于AR空間追蹤的嵌入式單色攝像頭首次與手部追蹤集成,以及是通過與德國電信擴(kuò)大的運(yùn)營商伙伴關(guān)系而實(shí)現(xiàn)。
對于Nreal,Clay AIR,以及消費(fèi)者而言,這項(xiàng)新功能是一次巨大的勝利。這是能夠推動(dòng)AR發(fā)展的消費(fèi)者采用。我們需要朝著用戶無需佩戴笨重設(shè)備即可獲得強(qiáng)大AR體驗(yàn)的未來進(jìn)發(fā)。這個(gè)合作將能夠幫助我們實(shí)現(xiàn)愿望。