AI技術(shù)行進(jìn)的方向應(yīng)該是怎樣的
自從2014年收購(gòu)Oculus以來(lái),facebook在VR上下的工夫一直都沒(méi)有減少,砸錢(qián)砸得不計(jì)成本。這些投入也被外界稱(chēng)為“為未來(lái)買(mǎi)單”,facebook扔進(jìn)大海的石子并沒(méi)有沉沒(méi)了事兒,也是激起了幾多浪花的。比如基于眼動(dòng)追蹤技術(shù)的VR圖像渲染上。
去年5月份,facebook推出了Half Dome原型機(jī),其集成了眼動(dòng)追蹤相機(jī)、寬視場(chǎng)光學(xué)系統(tǒng)和可獨(dú)立變焦顯示器,就是為了取得和人眼觀察事物一致的效果:對(duì)視線之外的區(qū)域進(jìn)行模糊處理,以達(dá)到沉浸式體驗(yàn)。同樣,這款原型機(jī)發(fā)布的時(shí)候和Tobii水平差不多,由于硬件和算法的限制,渲染的逼真程度很難讓人評(píng)價(jià)為體驗(yàn)良好。而去年12月,facebook就為其匹配了人工智能渲染系統(tǒng)Deep Focus。
那么,Deep Focus加持的圖像渲染和Tobii以及Half Dome原型機(jī)的區(qū)別在哪里呢?一個(gè)詞來(lái)回答就是:自然模糊。
對(duì)注視點(diǎn)之外的畫(huà)面進(jìn)行模糊處理是方向,但這其中的問(wèn)題也有很多:清晰區(qū)域和模糊區(qū)域的過(guò)渡是否平滑自然?注視點(diǎn)移動(dòng)過(guò)程中圖像由模糊到清晰的轉(zhuǎn)化是否自然?
不自然的過(guò)渡是這樣的:
自然的過(guò)渡則是這樣的:
顯然下圖要比上圖有更自然的注視點(diǎn)邊緣模糊處理。這也成為了Deep Focus努力的方向。而如果純粹是用算力來(lái)解決問(wèn)題,那對(duì)本身體積就存在限制的VR頭顯又提出了要求。因此facebook reality lab的研究者選擇了另外一個(gè)方向:利用深度學(xué)習(xí)來(lái)實(shí)現(xiàn)自然模糊。為此,研究團(tuán)隊(duì)需要大量的數(shù)據(jù)來(lái)對(duì)人工智能系統(tǒng)進(jìn)行訓(xùn)練。但問(wèn)題是上哪兒去找這么多數(shù)據(jù)呢?