Spatial、Nreal、高通與運(yùn)營商合作 以加速AR協(xié)作的應(yīng)用落地
戴上MR眼鏡,身處異地的幾個(gè)人在“同一空間看到對方”,實(shí)時(shí)交流、協(xié)同工作,甚至一起對空間內(nèi)的3D素材進(jìn)行編輯。
空間傳送聽上去似乎很不可思議,這樣的技術(shù)卻已然實(shí)現(xiàn),不僅支持多人異地,還支持不同MR、VR設(shè)備的使用者一同協(xié)作。
在下一代5G無線網(wǎng)絡(luò)上,通過AR進(jìn)行協(xié)作這種更豐富的方式可能很快就會(huì)進(jìn)入大眾市場。
今日,AR協(xié)作軟件開發(fā)商Spatial Systems、MR眼鏡制造商N(yùn)real和芯片制造商高通宣布,將與運(yùn)營商建立合作伙伴關(guān)系,以加速AR協(xié)作的應(yīng)用落地。
推動(dòng)5G+AR協(xié)作應(yīng)用?軟硬件、芯片制造商與運(yùn)營商強(qiáng)強(qiáng)聯(lián)合
今日,SpaTIal、Nreal和高通公司將與LG Uplus、KDDI以及Deutsche Telekom AG開展合作,與更多的參與者和更豐富的應(yīng)用一起,以高度復(fù)雜的3D內(nèi)容和更多樣化的格式增強(qiáng)AR協(xié)作。
SpaTIal認(rèn)為,其平臺(tái)與Nreal輕量級大視野頭顯的結(jié)合,將會(huì)是目前為運(yùn)營商推出的首款專門針對5G無線標(biāo)準(zhǔn)開發(fā)的平臺(tái)組合。
SpaTIal是一家AR應(yīng)用開發(fā)商,主要面向多人遠(yuǎn)程協(xié)作的工作場景。使用Nreal Light,加上搭載了高通驍龍855和865計(jì)算平臺(tái)的智能手機(jī),便可使用5G網(wǎng)絡(luò),讓身處異地的人仿佛在同一空間中工作,實(shí)現(xiàn)流暢的多人實(shí)時(shí)互動(dòng)。
SpaTIal的聯(lián)合創(chuàng)始人兼首席執(zhí)行官Anand Agarawala表示:“消費(fèi)者將能夠在任何地方像坐在他人旁邊一樣一起工作或進(jìn)行互動(dòng)。Spatial已經(jīng)投入使用,有許多《財(cái)富》1000強(qiáng)企業(yè)已經(jīng)對此進(jìn)行了積極探索。這其中很大一部分興趣是由硬件的易用性來推動(dòng)的,并且隨著5G網(wǎng)絡(luò)和像Nreal Light這樣的消費(fèi)級頭顯變得司空見慣,將會(huì)推動(dòng)這個(gè)市場發(fā)展的更快?!?其還表示:“硬件、芯片組和運(yùn)營商的這種結(jié)合對AR來說是一場完美的風(fēng)暴,就像在2000年代初通過智能手機(jī)、高速移動(dòng)數(shù)據(jù)和應(yīng)用商店推動(dòng)了手機(jī)市場革命一樣。”
Nreal在2019年推出Nreal Light MR眼鏡,以88g的輕薄機(jī)身、時(shí)尚外觀、499美元高性價(jià)比很快受到市場青睞,短短數(shù)月內(nèi)成功聚集了數(shù)千名內(nèi)容開發(fā)者。該設(shè)備不僅支持6Dof定位追蹤,還能夠通過USB-C線與搭載了高通855及以上5G芯片的智能手機(jī)連接,有效降低了使用門檻。目前開發(fā)者套裝已經(jīng)上市,售價(jià)1199美元。
此外,高通作為合作方之一,其產(chǎn)品管理高級總監(jiān)Brian Vogelsang也提到:“高通公司致力于連接并支持生態(tài)系統(tǒng),使XR成為下一個(gè)移動(dòng)計(jì)算平臺(tái),而我們與Spatial的合作就是一個(gè)典范。隨著全球運(yùn)營商和XR支持者大規(guī)模部署5G,并與合作伙伴(如使用驍龍平臺(tái)的Nreal與5G智能手機(jī))一起進(jìn)入企業(yè)和消費(fèi)者市場,我們將在2020年通過全息網(wǎng)真以及與Spatial平臺(tái)的虛擬協(xié)作來改變遠(yuǎn)程辦公?!?/p>
“傳送門”如何實(shí)現(xiàn)?
人們一直都很羨慕多啦A夢中的傳送門道具,很多科研人員也在研究相關(guān)“傳送技術(shù)”,比如通過引力作用產(chǎn)生時(shí)空扭曲甚至制造蟲洞來實(shí)現(xiàn)空間移動(dòng),顯然這還很遙遠(yuǎn)。
雖然在物理上無法做到,但通過虛擬化身實(shí)時(shí)同步卻已經(jīng)成為可能,并且使用門檻也在不斷降低。
2016年,微軟研究院曾經(jīng)展示黑科技Holoportation,視頻中不同地方的兩個(gè)人,戴上HoloLens能夠互相看到對方的逼真的虛擬化身,無論是在空間中移動(dòng),還是身體動(dòng)作、面部表情的展現(xiàn),甚至是雙方之間的交流互動(dòng),都能實(shí)時(shí)呈現(xiàn)出來,當(dāng)然雙方擊掌的時(shí)候雖然能看到手掌相合,卻并不會(huì)有任何觸感。
效果驚艷,不過成本也不低。這一系統(tǒng)需要給每一個(gè)需要傳送的人通過一系列3D攝像頭從各個(gè)角度捕捉人像,然后無縫地拼接為3D模型,再壓縮后進(jìn)行實(shí)時(shí)傳送。不論是硬件、算法還是網(wǎng)絡(luò)都有極高的要求,所以仍在研究階段。
Spatial或者可以理解為“低配版”空間傳送,雖然效果不及Holoportation,但成本和使用門檻大幅降低,成為企業(yè)能夠真正落地應(yīng)用的形態(tài)。
據(jù)官方介紹,應(yīng)用中的人物建??梢灾苯邮褂?D圖片掃描生成,省去了用3D攝像機(jī)建模的高昂成本,同時(shí)便于參與人員之間更快辨認(rèn)。而為了讓動(dòng)作表情更自然,在應(yīng)用中,人物的表情可以通過聲音來智能判斷并生成。(上半身)身體的動(dòng)作,通過MR眼鏡的手勢識(shí)別或者手柄捕捉。
使用Spatial,佩戴不同MR硬件的人,可以在不同地方在同一個(gè)空間里協(xié)同工作,觀看產(chǎn)品演示、對3D模型空間標(biāo)記、“面對面”實(shí)時(shí)溝通交流。
由于企業(yè)文件以2D居多,因此在Spatial中可以使用圖片墻功能查看,日常文檔也以平鋪形式展開,直觀而便捷。應(yīng)用支持多種文件格式,包括圖片、視頻、動(dòng)畫、3D文檔等。
由于應(yīng)用涉及到多方協(xié)作,需要對3D虛擬化身進(jìn)行實(shí)時(shí)渲染,保持語音、位置、手勢和面部表情的逼真度,同時(shí)還需要相對較低的延遲,否則體驗(yàn)會(huì)變得不穩(wěn)定,缺乏連續(xù)性可能會(huì)使通信變得困難。這就是為什么能提供高帶寬和低延遲的5G對于AR/VR協(xié)作是必不可少的。
AR協(xié)作將改變?nèi)藗児ぷ鞣绞?/p>
2020年,線上辦公成為了人們主要的工作方式,雖然線上辦公并不少見,也已經(jīng)存在多年,但當(dāng)遇到這種非常時(shí)期,只能線上辦公的時(shí)候,平時(shí)未注意到的一些弊端也被無限放大,溝通難、低效率、信息傳遞不清晰……當(dāng)大多數(shù)人聚焦于AR游戲娛樂時(shí),其實(shí)AR已經(jīng)可以融入工作場景,成為有力的生產(chǎn)力工具,并改變?nèi)藗兊墓ぷ鞣绞健?/p>
保時(shí)捷的“TechLiveLook”為經(jīng)銷商帶來了MR,通過將保時(shí)捷的經(jīng)銷商技術(shù)人員與專業(yè)技術(shù)人員通過實(shí)時(shí)互動(dòng)提供服務(wù),大大縮短了服務(wù)時(shí)間高達(dá)40%。
梅賽德斯-奔馳在斯圖加特的培訓(xùn)中心使用100個(gè)MR眼鏡,以便進(jìn)行更快速,更具吸引力的培訓(xùn)。
法國Airbus向日本航空公司提供MR應(yīng)用,將MR設(shè)備導(dǎo)入飛行員程序后,在虛擬空間中進(jìn)行試驗(yàn)等設(shè)計(jì)工程的作業(yè)時(shí)間減少了80%。
AR協(xié)同工作已經(jīng)在諸多大型知名企業(yè)中應(yīng)用。將人“傳送”到同一空間,不僅減少了傳統(tǒng)語音、視頻溝通中不必要麻煩,空間編輯、無限屏、多人協(xié)作、肢體表情的體現(xiàn),都讓遠(yuǎn)程協(xié)同更自然,更高效。
I have never seen anything quite like Spatial. It's extraordinary. It's disruptive.
我從未見過像Spatial這樣的東西,非常了不起,它是破壞性的。——福布斯
Spatial could also become a viable solution for movie studios looking for more secure solutions for their storyboarding.
對于那些為故事板尋求更安全解決方案的電影制片公司,Spatial也可能成為可行的解決方案。——Variety
海外媒體對于這種AR協(xié)同體驗(yàn)給出了極高的評價(jià),甚至認(rèn)為這是極具顛覆性的。
隨著芯片性能、圖形處理、光學(xué)技術(shù)不斷迭代,以及產(chǎn)業(yè)鏈逐步完善,AR眼鏡的門檻一步步降低,加上開發(fā)者和企業(yè)在應(yīng)用端的探索,AR眼鏡雖然還沒有進(jìn)入大眾日常娛樂生活中,但在企業(yè)端已經(jīng)從嘗試的初級階段,向規(guī)?;瘧?yīng)用階段快速過渡中。