上次我們介紹了紐約目前的ARVR圈子情況，涉及的方面非常廣泛，圍繞著迅速建立起來的圈子和生態(tài)圈，ARVR在各個(gè)方向都有著新的嘗試。
我們就來直接上點(diǎn)干貨

【AR】
AR x 工業(yè)

        哥倫比亞大學(xué)的 Steven Feiner 教授展示了 AR 在機(jī)械組裝上已有成效的研究。通過帶上Hololens，工人們不用再花時(shí)間閱讀冗長的組裝說明書來確定裝置的細(xì)節(jié)。另外一方面，AR眼鏡還可以通過實(shí)時(shí)傳導(dǎo)圖像讓不在現(xiàn)場的人也可以看見并指導(dǎo)在現(xiàn)場的人進(jìn)行操作。

圖： 攝于NYVR 2017 Feiner教授進(jìn)行ARVR在工業(yè)上的運(yùn)用

       Feiner教授在視覺領(lǐng)域非?；钴S，專攻電腦成像和用戶界面方向。其帶領(lǐng)的研究室最新發(fā)表了AirCode技術(shù)，有望使AR中的Marker Tracking有實(shí)質(zhì)性的突破。這種編碼將現(xiàn)在的二維碼進(jìn)行隱性化處理，QR的形狀將不會(huì)被肉眼看到卻能被機(jī)器識(shí)別。這樣的研究不僅解決了物品的美觀問題，也提升了外觀相似的物品（item recogniTIon中的難點(diǎn)）的易識(shí)別性和連接的不同信息的可能行，并且對(duì)于物品生產(chǎn)來說是實(shí)際而易用的。
 

圖 AirCode開發(fā)和運(yùn)用

AirCode學(xué)術(shù)展示原文：

         另外，F(xiàn)einer教授在EFXR 2017上則提到，目前最難攻克的AR方面的難題是眼球動(dòng)態(tài)（Eye Tracking）。筆者自己也體驗(yàn)了一下現(xiàn)場的眼球追蹤儀器，雖然能夠大致追蹤到位置，但由于眼球本身并不是完全靜止的，在屏幕上的現(xiàn)實(shí)會(huì)發(fā)生劇烈的抖動(dòng)，并且經(jīng)常會(huì)有誤判。

AR x 媒介

       要說到近期最?yuàn)Z人眼球的AR x 媒介的范例就是被蘋果商店官方推薦的華爾街日?qǐng)?bào)（WSJ）AR版了。該項(xiàng)目的負(fù)責(zé)人Roger Kenny親身到展臺(tái)來和大家交流道瓊斯指數(shù)在這方面的創(chuàng)新和對(duì)未來媒體行業(yè)科技運(yùn)用的想法。
 

圖 攝于EFXR 2017右二為Roger Kenny
 

       通過3D可視化的展現(xiàn)，人們能更清楚地看到各個(gè)股票的漲跌情況。同時(shí)還可以點(diǎn)擊進(jìn)入單個(gè)股票查詢其更詳細(xì)的信息。對(duì)于那些無數(shù)次希望可視化市場數(shù)據(jù)的人來說這無疑將派上用場。此外，它也有著一個(gè)合理的好處，你能夠采用新的方式瀏覽相關(guān)信息?？梢暬軌驇椭藗?cè)诖罅款I(lǐng)域發(fā)現(xiàn)相關(guān)趨勢或者利益所在，像為新興企業(yè)和產(chǎn)品所做的市場研究，像投資等等。而新視角則提供給用戶洞察市場運(yùn)作或者股票的表現(xiàn)的能力。
 

AR x 商業(yè)

       相比于中國AR借由電商和娛樂大廠搞得風(fēng)風(fēng)火火的各種商業(yè)活動(dòng)和運(yùn)用，紐約的展會(huì)上展示的DEMO似乎還在小規(guī)模探索中。和商業(yè)相關(guān)的似乎只看到基于商場的導(dǎo)覽功能相比于戶外空間店與店的指引，這個(gè)導(dǎo)覽功能是針對(duì)商場內(nèi)部引導(dǎo)，對(duì)于在不熟悉的商場中尋找心儀的店鋪是很有幫助的。另外還有一些針對(duì)商店內(nèi)的海報(bào)和宣傳冊(cè)的結(jié)合，相對(duì)來說切入店都顯得比較普通。但有一些開發(fā)者將AR和VR 360度全景結(jié)合在一起，也產(chǎn)生了一些新意。
 

圖 攝于EFXR 2017 商店內(nèi)GPS AR導(dǎo)覽
 

圖 攝于EFXR 2017 Verizon展臺(tái) AR和VR 360度全景的結(jié)合

AR x 娛樂

        自從Pokemon Go推行了基于LBS的AR玩法后，更多的研發(fā)者開始嘗試其他的游戲方式，目前主要的兩種方式產(chǎn)生于平面具現(xiàn)化或物體交互。紐約大學(xué)Tandon學(xué)院的Vhalerie Lee和Subigya Basnet共同研發(fā)了冰與火之歌的桌面AR展示，結(jié)合了3D模型，特效和音效的呈現(xiàn)，在桌面特征的捕捉上效果不俗。Vhalerie Lee表示后面將加入一些游戲性，向桌面游戲的方向發(fā)展。而VllageLive則更專注于城市里建筑的探索上，他們將Nelson在1980年拍攝的視頻隱藏在紐約的大街小巷，用戶探索紐約的過程中可以看到當(dāng)時(shí)紐約的情景并且探尋Nelson所拍攝的同性戀和性轉(zhuǎn)人歷史的記錄。Roi Lev則開發(fā)了When Things Talk Back，給了不同的物品角色，讓他們可以相互對(duì)話，甚至抱怨你為什么要吃他們。
 

圖：冰與火之歌桌面AR
 

圖：VillageLive同性戀歷史的城市探尋
 

圖 When Things Talk Back 在展會(huì)上

吸引了很多剛?cè)腴TAR的參觀者

AR x基礎(chǔ)設(shè)備

（MoTIon Tracking/Neuroscience）

        除了AR的直接應(yīng)用之外，還有一些開發(fā)者放了更多精力在提供基礎(chǔ)支持上，比如XTH Sense的傳感器。它能通過追蹤佩戴者的手、手腕及手臂的動(dòng)作來進(jìn)行位置確認(rèn)，并且能夠取得用戶的體溫，肌肉聲音，血液流動(dòng)，心跳來數(shù)據(jù)化用戶的身體情況，從而讓設(shè)計(jì)者能夠基于這些數(shù)據(jù)進(jìn)行內(nèi)容開發(fā)。例如創(chuàng)作者可以利用XTH Sense用身體發(fā)出聲音。
 

視頻 利用XTH Sense藝術(shù)家演出

        紐約大學(xué)Tandon學(xué)院則帶來了建筑神經(jīng)學(xué)的最新研究成果。他們探索神經(jīng)科學(xué)和建筑之間的結(jié)合和關(guān)系，探測人體在不同建筑空間內(nèi)的反應(yīng)和受到的影響來改善建筑和物品擺放設(shè)計(jì)。展會(huì)上展示的只是Eye tracking的部分，而且看得出不太穩(wěn)定，但可以期待優(yōu)化后在建筑設(shè)計(jì)上的運(yùn)用。
 

圖攝于EFXR 2017 Neurosciencefor Architecture, NYC Tandon

 

        在紐約的主要VR廠商玩家仍然集中在HTC，三星和微軟身上。而NYC Media Lab和HTC Vive的合作非常的深入。在幾次展會(huì)上都能看到HTC Vive內(nèi)容平臺(tái)的活躍。Jenna Seiden女士作為HTC Vive美區(qū)內(nèi)容發(fā)展負(fù)責(zé)人在NYVR上展示了Go to China的計(jì)劃，推進(jìn)VR內(nèi)容中美之間的交流。之前曾就職于NBA，微軟Xbox，她對(duì)內(nèi)容授權(quán)和內(nèi)容生態(tài)尤其是游戲內(nèi)容的打造有非常深厚的經(jīng)驗(yàn)。

另一方面，由于微軟在2017年發(fā)布了Mix Reality家族，它在紐約的展會(huì)上所展示的仍然圍繞友商的Mix Reality體驗(yàn)。
 

圖 攝于NYVR 2017 微軟的展臺(tái)主要以和友商

（Dell，HP，Lenovo，Samsung）合作的Mix Reality為主
 

圖 攝Nordstrom商場內(nèi)部

但NYC Media Lab合作的對(duì)象仍然主要是HTC Vive。
 

圖 在EFXR展會(huì)上VR展臺(tái)大部分是與HTC Vive合作的內(nèi)容

由于VR的DEMO和產(chǎn)品比較多，這里挑一些比較顯著的產(chǎn)品及內(nèi)容和大家分享。

VR x 醫(yī)療

         在此前說紐約在醫(yī)療方面的比較下功夫，因此在VR的創(chuàng)企上也不乏看到這樣的產(chǎn)品和內(nèi)容出現(xiàn)。以PIXCORE為例，這是一家主要為美國醫(yī)療和醫(yī)藥企業(yè)推出營銷計(jì)劃的公司。他們?cè)?017年的時(shí)候率先嘗試了將VR markeTIng帶入醫(yī)學(xué)領(lǐng)域的整合性內(nèi)容。通過對(duì)患者發(fā)病原因和病理的沉浸式展示，醫(yī)生們有了新的向讓患者切身體會(huì)到不良習(xí)慣所造成的身體傷害。
 

圖 Pixacore和醫(yī)藥領(lǐng)域的客戶合作推出的Disease EducaTIon

VR x 教育/訓(xùn)練

        另外一個(gè)就是之前提到的Aquinas Training,一個(gè)希望用VR在沉浸式方面的優(yōu)勢來增強(qiáng)記憶曲線的公司。相比于追逐和集中機(jī)器學(xué)習(xí)上，Aquinas Training的CEOHughSeaton更希望用新的科技加速和加強(qiáng)人類學(xué)習(xí)。機(jī)器學(xué)習(xí)的進(jìn)步尚且那么快了，而人類獲取，理解，運(yùn)用知識(shí)的過程卻沒有什么實(shí)質(zhì)的變化，而Aquinas Training則希望能專注于這一點(diǎn)。
 

圖：Hugh Seaton展示VR在教育上不可替代的促進(jìn)作用

“和AR相比，VR有其不可替代的獨(dú)特作用，能幫助人們模擬和完成在現(xiàn)實(shí)中很難做到或代價(jià)很高的事情，例如幾千英尺以上的海底探測，面對(duì)恐怖分子的突發(fā)狀況等。” Hugh Seaton在NYVR的Workshop上講到。

VR x 基礎(chǔ)

      還有一個(gè)則是偏基礎(chǔ)搭建的，其實(shí)AR，VR都用得到。Geopipe通過對(duì)衛(wèi)星圖片，地圖和激光掃描等成像的大數(shù)據(jù)收集和讀取，運(yùn)用機(jī)器學(xué)習(xí)和算法理解真實(shí)世界的物體結(jié)構(gòu)，從而實(shí)現(xiàn)城市真實(shí)建筑的抓取和建模，不僅能呈現(xiàn)基本形狀，還能模擬出城市的內(nèi)部構(gòu)造，周圍的樹以及窗戶位置和大小。這個(gè)能提高AR和VR城市模型的建立速度并減少成本。Geopipe是在NYVR創(chuàng)業(yè)者大賽中脫引而出成為第一的公司，CEO Christopher Mitchell和CTO Thomas Dickerson是高中同學(xué)，他們?cè)趯W(xué)生時(shí)期就有了這個(gè)想法，現(xiàn)在實(shí)現(xiàn)了，并通過紐約AR和VR的平臺(tái)找尋著客戶或者合作伙伴。
 

圖：Geopipe通過算法生成的城市樣貌還在有序的不斷增加

 

對(duì)于記錄城市發(fā)展也很有幫助

彩蛋

        在筆者之前參加的NYVR展中，有一家唯一的中國廠商——小派科技。那是Kickstarter結(jié)束眾籌的前6天，在紐約做showcase。雖然是僅有的中國廠商，但排隊(duì)的來嘗試的參展人絡(luò)繹不絕，可以說是排最長隊(duì)伍的展臺(tái)之一。雖然展示的內(nèi)容Demo是一個(gè)非常短時(shí)間的海底體驗(yàn)，但幾乎每一個(gè)試玩過的人都被8K畫質(zhì)和200度的FOV所震撼到，這樣的擬近人類的市場和高分辨率讓參展的人體驗(yàn)到了區(qū)別于當(dāng)次展覽的任何一家VR頭顯廠商。

        我們就是希望拿到國外來經(jīng)受批評(píng)和建議的洗禮，改進(jìn)后再推出來。美國的用戶喜歡交流，評(píng)論，批評(píng)，有許多建議對(duì)我們都是有用的，包括媒體，問的問題也很犀利。”CEO任攀先生總是自己幫助來試玩的人帶上小派的頭顯，回答著他們的一些問題。很多人并不會(huì)想到這個(gè)人就是在Kickstarter還有6天結(jié)束的時(shí)候就已經(jīng)眾籌到260萬美元的啟動(dòng)資金的小派核心人物之一。

        紐約的許多研發(fā)者都對(duì)中國AR和VR的進(jìn)展感興趣，并且希望能夠和中國的廠商進(jìn)行合作。當(dāng)筆者和紐約ARVR圈子里的人們分享天貓和騰訊在春節(jié)期間的AR紅包大戰(zhàn)以及一些新奇的ARVR硬件和內(nèi)容時(shí)，他們都認(rèn)真的聽著然后相互討論著。在EXFR的采訪宣講上Kyle Li也跟大家不斷安利Lenovo出的《絕地武士挑戰(zhàn)》游戲，稱其是最好的AR體驗(yàn)，并希望聯(lián)想能開放其SDK。

“我們知道中國甚至建立了一個(gè)VR公園，但還是鮮少看到AR方面的報(bào)道。希望能多了解你們的創(chuàng)業(yè)者都在做些什么。