科幻電影終究成真,Google的3D全息通話最新進展
據(jù)業(yè)內(nèi)消息,近日Google在近日召開的Cloud Next 2022大會上介紹了全息視頻通話項目Project Starline目前取得的一些進展。
3D全息通話就像很多科幻電影中那樣,即使雙方身在遙遠的異地,但是只要通過互聯(lián)網(wǎng)就可以進行3D的通話,仿佛就在身邊一樣,相比現(xiàn)在的2D視頻通話更加有真實感、沉浸感。
2021年中的Google I/O大會里,首席執(zhí)行官Sundar·Pichai宣布了可以不需要依靠頭戴設(shè)備就能實現(xiàn)3D全息視頻通話的項目Project Starline。
全息視頻通話項目Starline是Google內(nèi)部高度保密的實驗項目之一,相關(guān)的內(nèi)部人員透露,項目小組在2016年左右的時候就已經(jīng)開始做相關(guān)的技術(shù)研究了,但是直到去年才對外宣布,而且之后長達一年的時間里幾乎消失。
本次是一年以來首次提及這個項目,Sundar·Pichai認(rèn)為全息視頻通話項目已經(jīng)在Google內(nèi)部進行了超過幾千個小時的測試,接下來它將在選定的合作伙伴辦公室進行定期測試,年底將安裝好設(shè)備并開始測試,其中就有Salesforce、WeWork、T-Mobile以及Hackensack Meridian Health。
全息視頻通話項目主要基于一個65寸的光場顯示屏、預(yù)先布置的深度傳感器和高分辨率攝像頭、計算機深度學(xué)習(xí)和3D成像技術(shù),以及高級的聲音系統(tǒng),構(gòu)建了一個3D全息電話亭。
全息視頻通話項目在日常生活工作的網(wǎng)絡(luò)環(huán)境下就可以,并沒有比現(xiàn)在的視頻通話有更高的要求,開始通話之后,除了不能觸摸,雙方的音容笑貌均可被完美復(fù)刻,甚至可以進行眼神交流。
體驗過的人表示,Starline整個通話過程比Zoom更加流暢自然,沒有雜音以及幀率延遲,對一對一的對話很有作用,尤其是醫(yī)生辦公室或需要服務(wù)客戶的地方。
Starline的原理是通過傳感器和攝像頭來捕捉3D影響,再利用深度學(xué)習(xí)進行實時壓縮,把這些數(shù)據(jù)傳輸?shù)綄γ?,最后在對方的顯示上重建實時3D模型。
在目前普遍進軍VR領(lǐng)域的科技巨頭來說,Starline算是Google對元宇宙的另一種理解。盡管Google目前還沒有對外表示這套設(shè)備的價格,但是業(yè)內(nèi)普遍猜測會非常昂貴。