全球首個(gè)Magic Leap One體驗(yàn):嚇到你不敢進(jìn)房間
昨夜,業(yè)內(nèi)備受關(guān)注的AR技術(shù)公司Magic Leap,在獲得19億美元融資歷經(jīng)七年之后,終于放出其第一款頭盔產(chǎn)品Magic Leap One,很快在科技圈、VR圈引起刷屏式關(guān)注,大部分焦點(diǎn)集中在,“設(shè)計(jì)太丑”、“怎么像是效果圖?”、“融了19億美元就搞出個(gè)這?”,到底Magic Leap One是不是樣子貨?
同時(shí),從Magic Leap 創(chuàng)始人CEO羅尼·阿伯維茨(Rony Abovitz)對(duì)外的一些言論也看到不少值得關(guān)注的點(diǎn),比如他說(shuō):它也是一臺(tái)計(jì)算機(jī),設(shè)備很輕,但是工程技術(shù)卻像衛(wèi)星一樣復(fù)雜。也有說(shuō):從本質(zhì)上講,你正在創(chuàng)造視覺(jué)世界。你是聯(lián)合創(chuàng)作者,與動(dòng)態(tài)模擬光場(chǎng)信號(hào)一起創(chuàng)造。還說(shuō):每一個(gè)人都是創(chuàng)造者,不斷創(chuàng)造自己的虛擬世界。Magic Leap決定拋棄顯示屏,使用人類已有的顯示屏,也就是眼睛。是不是越聽越炫,來(lái)看到底是怎么回事:
千呼萬(wàn)喚始出來(lái)
終于,Magic Leap給我們帶來(lái)一臺(tái)原型頭盔,2018年,頭盔就會(huì)提供給開發(fā)者。Magic Leap給頭盔取名叫作“Magic Leap One”,包括一個(gè)控制器,一個(gè)電池組,尺寸和手掌差不多大,還有一幅眼鏡,充滿數(shù)字朋克色彩。Rolling Stone報(bào)道說(shuō)頭盔很貴。
老實(shí)說(shuō),我們知道的消息不多。開發(fā)者沒(méi)有辦法試用,所以無(wú)法與其它原型產(chǎn)品對(duì)比。
值得慶幸的是Magic Leap的技術(shù)終于變成有形產(chǎn)品了。
頭盔
冰球狀的設(shè)備實(shí)際上是一臺(tái)外置計(jì)算機(jī),名叫Lightpack。照估計(jì),設(shè)備可以接收多種輸入指令,比如語(yǔ)音、手勢(shì)、頭部動(dòng)作、眼球追蹤。它可以將虛擬電視投射到墻壁上,當(dāng)你回來(lái)時(shí),電視會(huì)掛在離開之前的位置。SDK明年年初就會(huì)出貨,至于硬件,可能明年的某個(gè)時(shí)間點(diǎn)也會(huì)出貨。
護(hù)目鏡有兩種尺寸可以選擇,前額墊、鼻子部分、太陽(yáng)穴墊片是可以調(diào)節(jié)的,確保使用時(shí)更舒服。當(dāng)產(chǎn)品推出時(shí),Magic Leap還會(huì)將醫(yī)學(xué)鏡片考慮進(jìn)去,簡(jiǎn)單來(lái)說(shuō),戴眼鏡的人也能使用。
控制器是用塑料制造的,有一排按鈕,支持6自由度動(dòng)作感知技術(shù)、支持觸覺(jué)反饋,還有一塊觸控板。
從設(shè)計(jì)上看,Lightwear和Lightpack有點(diǎn)像玩具,并不是因?yàn)樗鼈儽阋?實(shí)際上很貴),而是因?yàn)樗鼈兒茌p,看起來(lái)好小。
Magic Leap CEO羅尼·阿伯維茨(Rony Abovitz)說(shuō):“這是一臺(tái)袖珍計(jì)算機(jī),你可以將它想像成MacBook Pro或者外星人PC,里面有強(qiáng)大的CPU、GPU,還有硬盤、WiFi、各種電子組件,所以說(shuō)它本身就是一臺(tái)折疊計(jì)算機(jī)。”
談到Lightwear眼鏡,阿伯維茨解釋說(shuō):“它也是一臺(tái)計(jì)算機(jī),是一臺(tái)實(shí)時(shí)處理計(jì)算機(jī),可以感知世界,完成計(jì)算視覺(jué)處理任務(wù),還有一些機(jī)器學(xué)習(xí)功能,可以持續(xù)感知周圍世界。設(shè)備很輕,但是工程技術(shù)卻像衛(wèi)星一樣復(fù)雜。”
頭盔還可以感知用戶周圍的聲音,里面安裝了4個(gè)嵌入式麥克風(fēng),用實(shí)時(shí)計(jì)算機(jī)視覺(jué)處理器與外部攝像頭(6個(gè))追蹤穿戴者的位置。太陽(yáng)穴位置裝有小型高端揚(yáng)聲器,可以輸出空間聲音。
阿伯維茨說(shuō):“它是一款裝有攝像頭的眼鏡,能完成空間計(jì)算,擁有完整的意識(shí)。”
到底頭盔安裝了什么GPU、CPU,其它組件又是怎樣的?阿伯維茨不愿意透露,甚至連續(xù)航時(shí)間也不愿意說(shuō)。為什么?阿伯維茨說(shuō),他們想保留一些消息晚點(diǎn)發(fā)布,而且他們正在優(yōu)化電池。Magic Leap已經(jīng)動(dòng)手開發(fā)下一款原型機(jī)。
體驗(yàn)
Magic Leap邀請(qǐng)Rolling Stone試玩了一些“Demos”。有哪些演示體驗(yàn)?zāi)?比如,里面有虛擬角色,你可以用眼神與它接觸,有漂浮的漫畫書,有虛擬現(xiàn)場(chǎng)表演(用體積攝像頭捕捉的)。之前有傳聞?wù)f,Magic Leap碰到了麻煩,它很難將技術(shù)壓縮到小小的護(hù)目鏡內(nèi),同時(shí)還要保證性能,演示似乎讓傳聞不攻自破,它告訴我們:體驗(yàn)沒(méi)有延遲,即使走來(lái)走去,靠近或者遠(yuǎn)離也沒(méi)有關(guān)系。
為了讓訪客體驗(yàn)技術(shù),Magic Leap在大樓內(nèi)建了一個(gè)體驗(yàn)場(chǎng)所,和攝影棚差不多。Magic Leap在這里測(cè)試體驗(yàn),未來(lái)這些體驗(yàn)可能會(huì)用在主題公園及其它大型場(chǎng)所。Rolling Stone記者花了一小時(shí)體驗(yàn)??傮w來(lái)說(shuō),這些體驗(yàn)我們暫時(shí)無(wú)法在現(xiàn)實(shí)中看到,Magic Leap只是想讓訪客親自看看“魔法”到底是怎樣的。
Rolling Stone記者試玩了幾個(gè)演示產(chǎn)品,體驗(yàn)如下:
一、主題公園
進(jìn)入一個(gè)科幻世界,Magic Leap用隱藏風(fēng)扇、揚(yáng)聲器、計(jì)算機(jī)控制的彩色燈光陣列增強(qiáng)體驗(yàn)。體驗(yàn)很棒,它告訴我們:主題公園可以沒(méi)有墻壁,游客也不需要等待。一切都是在舞臺(tái)布景中發(fā)生的,雖然看到的東西與現(xiàn)實(shí)有差異,但是相當(dāng)接近。
二、Gimble機(jī)器人
進(jìn)入一幢大樓,里面有一個(gè)大房間,裝修風(fēng)格跟居住空間差不多,有沙發(fā)、桌子、小擺設(shè)和地毯。進(jìn)入演示區(qū),有幾種體驗(yàn)可以試玩。首先就是Gimble,它是一個(gè)機(jī)器人,飄浮在空中,介于眼睛與墻壁之間。你可以走近機(jī)器人,圍著機(jī)器人轉(zhuǎn),從不同的角度觀看……機(jī)器人靜靜飄浮在視野中。周圍的世界仍然不變,你不能透過(guò)機(jī)器人看到世界。似乎機(jī)器人不是虛擬的,而是真實(shí)的,也不是平面圖片。當(dāng)你靠近機(jī)器人,圖像不會(huì)變成粗糙的像素,走近能看見一些細(xì)節(jié),在遠(yuǎn)處看不到。如果靠得太近就會(huì)消失,或者人會(huì)進(jìn)入到物體內(nèi)部,Magic Leap解釋說(shuō)演示體驗(yàn)還沒(méi)有完善。當(dāng)你圍著機(jī)器人轉(zhuǎn)動(dòng)時(shí),聲音也跟著轉(zhuǎn)。
三、虛擬顯示屏
接下來(lái),Magic Leap高管在記者的視野內(nèi)擺下三塊虛擬顯示屏。屏幕看起來(lái)就像超大平板電視或者顯示器。你可以移動(dòng)屏幕,可以自由組合。觀看屏幕時(shí),機(jī)器人仍然懸浮在旁邊。
四、4面立體電視
隨后你可以嘗試另一種體驗(yàn),那里有一個(gè)飄浮的4面電視,每一面都在播放直播節(jié)目。你可以圍著立體電視轉(zhuǎn)圈,看不同的頻道。不論觀看還是不看,電視頻道都會(huì)一直播放。
五、虛擬美女
房間的墻壁上突然用白光顯示門的輪廓,然后門打開了,一名女人走進(jìn)來(lái)。她朝你走來(lái),相隔幾英尺遠(yuǎn),站在旁邊。細(xì)節(jié)相當(dāng)逼真。當(dāng)然啦,這個(gè)人不是真人,不論你說(shuō)什么,女人不會(huì)說(shuō)話,也不會(huì)響應(yīng),她沒(méi)有這樣的能力。你可以用手動(dòng)方式控制她的表情,比如微笑、憤怒、厭惡。當(dāng)你移動(dòng)或者四處觀看時(shí),她的眼睛會(huì)跟著你轉(zhuǎn)。Lightwear內(nèi)部攝像頭會(huì)將數(shù)據(jù)發(fā)送給她,這樣她就能保持眼神接觸了。
六、漫畫書
你會(huì)看到一本巨大的漫畫書,你可以走近一點(diǎn)觀看,就像透過(guò)窗戶觀看一樣。
七、觀看現(xiàn)場(chǎng)表演
Magic Leap還演示了所謂的“體積捕捉”技術(shù)。是什么呢?團(tuán)隊(duì)跑到工作室,讓他們用特殊設(shè)備錄制演員的現(xiàn)場(chǎng)表現(xiàn)內(nèi)容,然后Magic Leap將演員放進(jìn)系統(tǒng),最終,用戶不論站在哪個(gè)房間,都可以看到現(xiàn)場(chǎng)表演。雖然捕捉的內(nèi)容有些細(xì)節(jié)比較粗糙,比如鼻子與嘴唇之間的地方有點(diǎn)太圓了,不過(guò)體驗(yàn)還是很驚人的,因?yàn)槟憧梢越嚯x觀看真人表演,還可以圍著人轉(zhuǎn)動(dòng)。圖像不會(huì)卡頓,不會(huì)延遲,即使你圍著表演者轉(zhuǎn)動(dòng),靠近觀看,離遠(yuǎn)觀看,都不會(huì)有任何問(wèn)題。表演者可以放大或者縮小,甚至可以放在手掌中。
八、Tonandi音樂(lè)體驗(yàn)
Sigur Ros與Magic Leap合作開發(fā)了一種名叫“音景”(soundscape)的體驗(yàn)。為了體驗(yàn)新產(chǎn)品,試用者先要將耳機(jī)插在頭盔上。這是一個(gè)名叫Tonandi的項(xiàng)目,體驗(yàn)者看到的不是錄制音樂(lè)片段,而是互動(dòng)音景。
進(jìn)入Tonandi世界,你會(huì)獲得這樣的體驗(yàn):
在你的周圍會(huì)出現(xiàn)一些縹緲的樹,然后看你如何反應(yīng)。進(jìn)入場(chǎng)景,周圍飄浮著各種小精靈。當(dāng)你向它們揮手,它們就會(huì)唱歌。然后各種各樣的生物就會(huì)冒出來(lái),你觸摸它們,向它們揮手,敲打他們,然后就會(huì)播放各種音樂(lè)。地上會(huì)長(zhǎng)出豆莢,有長(zhǎng)長(zhǎng)的莖,草在地毯上、咖啡桌上鋪展。豆莢像花蕾一樣綻放。
創(chuàng)造Tonandi體驗(yàn)用到了許多技術(shù),比如眼球追蹤、手勢(shì)技術(shù)。阿伯維茨說(shuō),他們正在開發(fā)一種非常嚇人的體驗(yàn),可以嚇得你再也不敢進(jìn)房間。
九、Weta Workshop的游戲
Weta Workshop是一家特效公司,《指環(huán)王》、《銀翼殺手2049》的特效都是它做的,它正在為Magic Leap開發(fā)游戲。游戲由Weta Gameshop部門操刀,圍繞Dr. Grordbort幻想世界設(shè)計(jì)。新部門有55個(gè)人正在開發(fā)這款游戲,兩家公司合作已經(jīng)有5年了。
明年硬件推出時(shí),游戲也會(huì)推出,這是一款第一人稱射擊游戲。在游戲中,一個(gè)機(jī)器人星球找到入口來(lái)到地球,它們想入侵地球。玩家必須阻止機(jī)器人穿過(guò)入口。當(dāng)你進(jìn)入游戲,入口會(huì)在休息室的墻上打開,或者在臥室墻壁上打開,你會(huì)看到機(jī)器人星球。
光場(chǎng)
頭盔使用了一種關(guān)鍵技術(shù),它就是“模擬光場(chǎng)信號(hào)”(analog light field signal)。從本質(zhì)上講,光場(chǎng)就是所有物體反射的光的集合。當(dāng)你拿起一幅畫,光場(chǎng)的每一個(gè)薄片你都能捕捉到。不過(guò)眼睛看到的東西不只包括光場(chǎng),還能感知深度、移動(dòng)及其它視覺(jué)元素。
光場(chǎng)信號(hào)如何通過(guò)眼睛進(jìn)入大腦,進(jìn)入視皮質(zhì),這就是阿伯維茨想解決的問(wèn)題。他說(shuō):“你所感知的世界實(shí)際上是在視皮質(zhì)上形成的。視皮質(zhì)與大腦的一部分相當(dāng)于渲染引擎,100萬(wàn)億個(gè)神經(jīng)連接會(huì)對(duì)你所觀看的外部世界進(jìn)行渲染。”
人類40%的神經(jīng)處理能力會(huì)用來(lái)處理視覺(jué)信息,做某些事情時(shí)會(huì)達(dá)到70-80%,比如從事體育活動(dòng)時(shí)。阿伯維茨說(shuō):“從本質(zhì)上講,你正在創(chuàng)造視覺(jué)世界。你是聯(lián)合創(chuàng)作者,與動(dòng)態(tài)模擬光場(chǎng)信號(hào)一起創(chuàng)造。”
因?yàn)樾畔⑻珡?fù)雜,創(chuàng)造人工光場(chǎng)相當(dāng)困難。后來(lái)阿伯維茨認(rèn)識(shí)到,人類視覺(jué)系統(tǒng)可能像過(guò)濾器。換言之,人眼并沒(méi)有真正觀看所有東西,它會(huì)從光場(chǎng)中過(guò)濾大量光線,只讓少量光信息進(jìn)入視皮質(zhì)。
所以,研究的重點(diǎn)就是找到那些光場(chǎng)信息,讓它通過(guò)眼睛輸入到視皮質(zhì)。阿伯維茨說(shuō):“我們的想法是這樣的,如果能夠找到這些信息并且(或者)接近它,也許就能破解,植入晶片。這樣一來(lái),小小的晶片就可以發(fā)射數(shù)字光場(chǎng)信號(hào),再次呈現(xiàn)圖像。這就是我們的關(guān)鍵構(gòu)想。”
阿伯維茨相信,如果能夠開發(fā)出一塊晶片,將正確的光場(chǎng)光線輸入大腦,就可以欺騙大腦,讓它認(rèn)為看到的虛擬圖像是真的。
在這種構(gòu)想的指導(dǎo)下,Magic Leap決定拋棄顯示屏,使用人類已有的顯示屏,也就是眼睛。
阿伯維茨說(shuō):“我們有兩個(gè)核心構(gòu)想,第一個(gè),沒(méi)有顯示屏才是最好的顯示屏,第二個(gè),外部的東西實(shí)際上是內(nèi)部的東西。事實(shí)證明這些構(gòu)想是正確的。一切你認(rèn)為位于身外的東西,實(shí)際上是在內(nèi)部渲染出來(lái)的,由你與模擬光場(chǎng)信號(hào)聯(lián)合創(chuàng)造出來(lái)。”
他還說(shuō):“從本質(zhì)上講,每一個(gè)人都是創(chuàng)造者,不斷創(chuàng)造自己的虛擬世界。”
Magic Leap的晶片(Wafer)是誰(shuí)制造的?公司的人不愿意透露。
阿伯維茨說(shuō),最開始公司似乎只是率先提出信號(hào)概念,然后開始開發(fā)信號(hào)晶體管。他說(shuō):“我們沒(méi)有讓電子在晶體管內(nèi)移動(dòng),而是讓光子移動(dòng),也就是納米結(jié)構(gòu)3D射線光子信號(hào)。具體叫什么,還沒(méi)有取名,一直以來(lái)我們管它叫作Sea Monkeys,當(dāng)然咯,我們不會(huì)用這個(gè)來(lái)命名。我們會(huì)想一個(gè)很酷的名字,給架構(gòu)命名。”
阿伯維茨說(shuō),晶片讓光子在3D架構(gòu)內(nèi)移動(dòng),輸出非常特殊的數(shù)字光場(chǎng)信號(hào)。最終,這些光場(chǎng)晶片變成了更大、更圓的鏡頭,然后放進(jìn)了護(hù)目鏡。
視野
Magic Leap的顯示視野以矩形形式顯示,不知道尺寸,這點(diǎn)和HoloLens是一樣的。
到底視野有多大?如果你將VHS錄象帶放在眼前,手臂半舒展,看到的錄象帶視野和頭盔視野差不多。
Magic Leap One的視野并沒(méi)有比HoloLens大多少。
公司工程高級(jí)主管山姆·米勒(Sam Miller)說(shuō):“未來(lái)的硬件會(huì)讓視野明顯擴(kuò)大。你在這些設(shè)備上看到的視野,和出貨時(shí)設(shè)備的視野是一樣的。不過(guò)下一代產(chǎn)品會(huì)大很多。我們的實(shí)驗(yàn)室正在開發(fā)。”
你可以淡化邊緣,這樣一來(lái)看到的圖像就不會(huì)有太強(qiáng)的破碎感。
米勒還展示了一個(gè)有趣的體驗(yàn)。他走到大房間的一端,然后讓我彈出Gimble。機(jī)器人出現(xiàn)在遠(yuǎn)方,浮在空中,靠近米勒。他走到機(jī)器人所在的位置,此時(shí)米勒身體的大部分消失了,腿與機(jī)器人底部連接在一起。
就目前來(lái)說(shuō),Magic Leap的目標(biāo)是降低重量,提高計(jì)算力。所以公司選擇了分散計(jì)算架構(gòu),部分設(shè)備完成實(shí)時(shí)處理,部分完成應(yīng)用處理。最初的設(shè)備用有線技術(shù)連接,未來(lái)會(huì)引入無(wú)線技術(shù)。為什么呢?因?yàn)榫彤?dāng)下來(lái)說(shuō),確保不延遲,確保有強(qiáng)大的計(jì)算力,這些更重要。
因?yàn)轭^盔內(nèi)部有計(jì)算機(jī),所以不需要外部臺(tái)式PC支持。頭盔能夠提供初級(jí)的室外體驗(yàn),主要還是用在室內(nèi)。先室內(nèi)再室外,這就是Magic Leap的既定路線。