紐約AR/VR創(chuàng)業(yè)真實(shí)記錄,海量干貨來(lái)襲
上次我們介紹了紐約目前的ARVR圈子情況,涉及的方面非常廣泛,圍繞著迅速建立起來(lái)的圈子和生態(tài)圈,ARVR在各個(gè)方向都有著新的嘗試。
我們就來(lái)直接上點(diǎn)干貨
AR x 工業(yè)
哥倫比亞大學(xué)的 Steven Feiner 教授展示了 AR 在機(jī)械組裝上已有成效的研究。通過(guò)帶上Hololens,工人們不用再花時(shí)間閱讀冗長(zhǎng)的組裝說(shuō)明書來(lái)確定裝置的細(xì)節(jié)。另外一方面,AR眼鏡還可以通過(guò)實(shí)時(shí)傳導(dǎo)圖像讓不在現(xiàn)場(chǎng)的人也可以看見(jiàn)并指導(dǎo)在現(xiàn)場(chǎng)的人進(jìn)行操作。
圖: 攝于NYVR 2017 Feiner教授進(jìn)行ARVR在工業(yè)上的運(yùn)用
Feiner教授在視覺(jué)領(lǐng)域非?;钴S,專攻電腦成像和用戶界面方向。其帶領(lǐng)的研究室最新發(fā)表了AirCode技術(shù),有望使AR中的Marker Tracking有實(shí)質(zhì)性的突破。這種編碼將現(xiàn)在的二維碼進(jìn)行隱性化處理,QR的形狀將不會(huì)被肉眼看到卻能被機(jī)器識(shí)別。這樣的研究不僅解決了物品的美觀問(wèn)題,也提升了外觀相似的物品(item recogniTIon中的難點(diǎn))的易識(shí)別性和連接的不同信息的可能行,并且對(duì)于物品生產(chǎn)來(lái)說(shuō)是實(shí)際而易用的。
圖 AirCode開(kāi)發(fā)和運(yùn)用
AirCode學(xué)術(shù)展示原文:
另外,F(xiàn)einer教授在EFXR 2017上則提到,目前最難攻克的AR方面的難題是眼球動(dòng)態(tài)(Eye Tracking)。筆者自己也體驗(yàn)了一下現(xiàn)場(chǎng)的眼球追蹤儀器,雖然能夠大致追蹤到位置,但由于眼球本身并不是完全靜止的,在屏幕上的現(xiàn)實(shí)會(huì)發(fā)生劇烈的抖動(dòng),并且經(jīng)常會(huì)有誤判。
要說(shuō)到近期最?yuàn)Z人眼球的AR x 媒介的范例就是被蘋果商店官方推薦的華爾街日?qǐng)?bào)(WSJ)AR版了。該項(xiàng)目的負(fù)責(zé)人Roger Kenny親身到展臺(tái)來(lái)和大家交流道瓊斯指數(shù)在這方面的創(chuàng)新和對(duì)未來(lái)媒體行業(yè)科技運(yùn)用的想法。
圖 攝于EFXR 2017右二為Roger Kenny
通過(guò)3D可視化的展現(xiàn),人們能更清楚地看到各個(gè)股票的漲跌情況。同時(shí)還可以點(diǎn)擊進(jìn)入單個(gè)股票查詢其更詳細(xì)的信息。對(duì)于那些無(wú)數(shù)次希望可視化市場(chǎng)數(shù)據(jù)的人來(lái)說(shuō)這無(wú)疑將派上用場(chǎng)。此外,它也有著一個(gè)合理的好處,你能夠采用新的方式瀏覽相關(guān)信息??梢暬軌驇椭藗?cè)诖罅款I(lǐng)域發(fā)現(xiàn)相關(guān)趨勢(shì)或者利益所在,像為新興企業(yè)和產(chǎn)品所做的市場(chǎng)研究,像投資等等。而新視角則提供給用戶洞察市場(chǎng)運(yùn)作或者股票的表現(xiàn)的能力。
AR x 商業(yè)
相比于中國(guó)AR借由電商和娛樂(lè)大廠搞得風(fēng)風(fēng)火火的各種商業(yè)活動(dòng)和運(yùn)用,紐約的展會(huì)上展示的DEMO似乎還在小規(guī)模探索中。和商業(yè)相關(guān)的似乎只看到基于商場(chǎng)的導(dǎo)覽功能相比于戶外空間店與店的指引,這個(gè)導(dǎo)覽功能是針對(duì)商場(chǎng)內(nèi)部引導(dǎo),對(duì)于在不熟悉的商場(chǎng)中尋找心儀的店鋪是很有幫助的。另外還有一些針對(duì)商店內(nèi)的海報(bào)和宣傳冊(cè)的結(jié)合,相對(duì)來(lái)說(shuō)切入店都顯得比較普通。但有一些開(kāi)發(fā)者將AR和VR 360度全景結(jié)合在一起,也產(chǎn)生了一些新意。
圖 攝于EFXR 2017 商店內(nèi)GPS AR導(dǎo)覽
圖 攝于EFXR 2017 Verizon展臺(tái) AR和VR 360度全景的結(jié)合
AR x 娛樂(lè)
自從Pokemon Go推行了基于LBS的AR玩法后,更多的研發(fā)者開(kāi)始嘗試其他的游戲方式,目前主要的兩種方式產(chǎn)生于平面具現(xiàn)化或物體交互。紐約大學(xué)Tandon學(xué)院的Vhalerie Lee和Subigya Basnet共同研發(fā)了冰與火之歌的桌面AR展示,結(jié)合了3D模型,特效和音效的呈現(xiàn),在桌面特征的捕捉上效果不俗。Vhalerie Lee表示后面將加入一些游戲性,向桌面游戲的方向發(fā)展。而VllageLive則更專注于城市里建筑的探索上,他們將Nelson在1980年拍攝的視頻隱藏在紐約的大街小巷,用戶探索紐約的過(guò)程中可以看到當(dāng)時(shí)紐約的情景并且探尋Nelson所拍攝的同性戀和性轉(zhuǎn)人歷史的記錄。Roi Lev則開(kāi)發(fā)了When Things Talk Back,給了不同的物品角色,讓他們可以相互對(duì)話,甚至抱怨你為什么要吃他們。
圖:冰與火之歌桌面AR
圖:VillageLive同性戀歷史的城市探尋
圖 When Things Talk Back 在展會(huì)上
吸引了很多剛?cè)腴TAR的參觀者
AR x基礎(chǔ)設(shè)備
(MoTIon Tracking/Neuroscience)
除了AR的直接應(yīng)用之外,還有一些開(kāi)發(fā)者放了更多精力在提供基礎(chǔ)支持上,比如XTH Sense的傳感器。它能通過(guò)追蹤佩戴者的手、手腕及手臂的動(dòng)作來(lái)進(jìn)行位置確認(rèn),并且能夠取得用戶的體溫,肌肉聲音,血液流動(dòng),心跳來(lái)數(shù)據(jù)化用戶的身體情況,從而讓設(shè)計(jì)者能夠基于這些數(shù)據(jù)進(jìn)行內(nèi)容開(kāi)發(fā)。例如創(chuàng)作者可以利用XTH Sense用身體發(fā)出聲音。
視頻 利用XTH Sense藝術(shù)家演出
紐約大學(xué)Tandon學(xué)院則帶來(lái)了建筑神經(jīng)學(xué)的最新研究成果。他們探索神經(jīng)科學(xué)和建筑之間的結(jié)合和關(guān)系,探測(cè)人體在不同建筑空間內(nèi)的反應(yīng)和受到的影響來(lái)改善建筑和物品擺放設(shè)計(jì)。展會(huì)上展示的只是Eye tracking的部分,而且看得出不太穩(wěn)定,但可以期待優(yōu)化后在建筑設(shè)計(jì)上的運(yùn)用。
圖攝于EFXR 2017 Neurosciencefor Architecture, NYC Tandon
在紐約的主要VR廠商玩家仍然集中在HTC,三星和微軟身上。而NYC Media Lab和HTC Vive的合作非常的深入。在幾次展會(huì)上都能看到HTC Vive內(nèi)容平臺(tái)的活躍。Jenna Seiden女士作為HTC Vive美區(qū)內(nèi)容發(fā)展負(fù)責(zé)人在NYVR上展示了Go to China的計(jì)劃,推進(jìn)VR內(nèi)容中美之間的交流。之前曾就職于NBA,微軟Xbox,她對(duì)內(nèi)容授權(quán)和內(nèi)容生態(tài)尤其是游戲內(nèi)容的打造有非常深厚的經(jīng)驗(yàn)。
另一方面,由于微軟在2017年發(fā)布了Mix Reality家族,它在紐約的展會(huì)上所展示的仍然圍繞友商的Mix Reality體驗(yàn)。
圖 攝于NYVR 2017 微軟的展臺(tái)主要以和友商
(Dell,HP,Lenovo,Samsung)合作的Mix Reality為主
圖 攝Nordstrom商場(chǎng)內(nèi)部
但NYC Media Lab合作的對(duì)象仍然主要是HTC Vive。
圖 在EFXR展會(huì)上VR展臺(tái)大部分是與HTC Vive合作的內(nèi)容
由于VR的DEMO和產(chǎn)品比較多,這里挑一些比較顯著的產(chǎn)品及內(nèi)容和大家分享。
在此前說(shuō)紐約在醫(yī)療方面的比較下功夫,因此在VR的創(chuàng)企上也不乏看到這樣的產(chǎn)品和內(nèi)容出現(xiàn)。以PIXCORE為例,這是一家主要為美國(guó)醫(yī)療和醫(yī)藥企業(yè)推出營(yíng)銷計(jì)劃的公司。他們?cè)?017年的時(shí)候率先嘗試了將VR markeTIng帶入醫(yī)學(xué)領(lǐng)域的整合性內(nèi)容。通過(guò)對(duì)患者發(fā)病原因和病理的沉浸式展示,醫(yī)生們有了新的向讓患者切身體會(huì)到不良習(xí)慣所造成的身體傷害。
圖 Pixacore和醫(yī)藥領(lǐng)域的客戶合作推出的Disease EducaTIon
VR x 教育/訓(xùn)練
另外一個(gè)就是之前提到的Aquinas Training,一個(gè)希望用VR在沉浸式方面的優(yōu)勢(shì)來(lái)增強(qiáng)記憶曲線的公司。相比于追逐和集中機(jī)器學(xué)習(xí)上,Aquinas Training的CEOHughSeaton更希望用新的科技加速和加強(qiáng)人類學(xué)習(xí)。機(jī)器學(xué)習(xí)的進(jìn)步尚且那么快了,而人類獲取,理解,運(yùn)用知識(shí)的過(guò)程卻沒(méi)有什么實(shí)質(zhì)的變化,而Aquinas Training則希望能專注于這一點(diǎn)。
圖:Hugh Seaton展示VR在教育上不可替代的促進(jìn)作用
“和AR相比,VR有其不可替代的獨(dú)特作用,能幫助人們模擬和完成在現(xiàn)實(shí)中很難做到或代價(jià)很高的事情,例如幾千英尺以上的海底探測(cè),面對(duì)恐怖分子的突發(fā)狀況等。” Hugh Seaton在NYVR的Workshop上講到。
還有一個(gè)則是偏基礎(chǔ)搭建的,其實(shí)AR,VR都用得到。Geopipe通過(guò)對(duì)衛(wèi)星圖片,地圖和激光掃描等成像的大數(shù)據(jù)收集和讀取,運(yùn)用機(jī)器學(xué)習(xí)和算法理解真實(shí)世界的物體結(jié)構(gòu),從而實(shí)現(xiàn)城市真實(shí)建筑的抓取和建模,不僅能呈現(xiàn)基本形狀,還能模擬出城市的內(nèi)部構(gòu)造,周圍的樹(shù)以及窗戶位置和大小。這個(gè)能提高AR和VR城市模型的建立速度并減少成本。Geopipe是在NYVR創(chuàng)業(yè)者大賽中脫引而出成為第一的公司,CEO Christopher Mitchell和CTO Thomas Dickerson是高中同學(xué),他們?cè)趯W(xué)生時(shí)期就有了這個(gè)想法,現(xiàn)在實(shí)現(xiàn)了,并通過(guò)紐約AR和VR的平臺(tái)找尋著客戶或者合作伙伴。
圖:Geopipe通過(guò)算法生成的城市樣貌還在有序的不斷增加
對(duì)于記錄城市發(fā)展也很有幫助
彩蛋
在筆者之前參加的NYVR展中,有一家唯一的中國(guó)廠商——小派科技。那是Kickstarter結(jié)束眾籌的前6天,在紐約做showcase。雖然是僅有的中國(guó)廠商,但排隊(duì)的來(lái)嘗試的參展人絡(luò)繹不絕,可以說(shuō)是排最長(zhǎng)隊(duì)伍的展臺(tái)之一。雖然展示的內(nèi)容Demo是一個(gè)非常短時(shí)間的海底體驗(yàn),但幾乎每一個(gè)試玩過(guò)的人都被8K畫質(zhì)和200度的FOV所震撼到,這樣的擬近人類的市場(chǎng)和高分辨率讓參展的人體驗(yàn)到了區(qū)別于當(dāng)次展覽的任何一家VR頭顯廠商。
我們就是希望拿到國(guó)外來(lái)經(jīng)受批評(píng)和建議的洗禮,改進(jìn)后再推出來(lái)。美國(guó)的用戶喜歡交流,評(píng)論,批評(píng),有許多建議對(duì)我們都是有用的,包括媒體,問(wèn)的問(wèn)題也很犀利。”CEO任攀先生總是自己幫助來(lái)試玩的人帶上小派的頭顯,回答著他們的一些問(wèn)題。很多人并不會(huì)想到這個(gè)人就是在Kickstarter還有6天結(jié)束的時(shí)候就已經(jīng)眾籌到260萬(wàn)美元的啟動(dòng)資金的小派核心人物之一。
紐約的許多研發(fā)者都對(duì)中國(guó)AR和VR的進(jìn)展感興趣,并且希望能夠和中國(guó)的廠商進(jìn)行合作。當(dāng)筆者和紐約ARVR圈子里的人們分享天貓和騰訊在春節(jié)期間的AR紅包大戰(zhàn)以及一些新奇的ARVR硬件和內(nèi)容時(shí),他們都認(rèn)真的聽(tīng)著然后相互討論著。在EXFR的采訪宣講上Kyle Li也跟大家不斷安利Lenovo出的《絕地武士挑戰(zhàn)》游戲,稱其是最好的AR體驗(yàn),并希望聯(lián)想能開(kāi)放其SDK。
“我們知道中國(guó)甚至建立了一個(gè)VR公園,但還是鮮少看到AR方面的報(bào)道。希望能多了解你們的創(chuàng)業(yè)者都在做些什么。