觀眾可與視頻中物體互動(dòng) 二次元與三次元要連通?
北京時(shí)間8月3日消息,據(jù)科技網(wǎng)站Techcrunch報(bào)道,麻省理工學(xué)院(MIT)發(fā)布最新研究,觀眾可操控視頻里的物體,而物體也會(huì)做出相應(yīng)的反應(yīng)。二次元與三次元是要連通了嗎?
嚴(yán)格來(lái)說,視頻這種媒介是不能實(shí)現(xiàn)互動(dòng)的,但麻省理工的研究者們決定改變這一事實(shí)。計(jì)算機(jī)科學(xué)和人工智能實(shí)驗(yàn)室(CSAIL)研發(fā)了一項(xiàng)新技術(shù),觀眾可以“摸”到視頻里的物體,還可以操控它們,就像在真實(shí)世界里一樣。
比如,你在看一段彈吉他的視頻,畫面給了琴弦一個(gè)特寫,這時(shí)你用鼠標(biāo)撥動(dòng)琴弦,會(huì)看到琴弦因?yàn)槟愕膿軇?dòng)在震顫。你還可以測(cè)試一座老橋的承重能力,施加虛擬壓力比如風(fēng),或者駛過一輛貨車。
這一技術(shù)是通過分析物體震動(dòng)規(guī)律實(shí)現(xiàn)的。用攝像機(jī)拍下一段視頻,然后根據(jù)實(shí)驗(yàn)室開發(fā)的算法進(jìn)行分析。分析特定物體的震動(dòng)規(guī)律后,就可以建立一個(gè)模型,并預(yù)測(cè)其對(duì)其他運(yùn)動(dòng)或受力的反應(yīng)。
電子游戲或其他互動(dòng)性媒介通常是通過建立虛擬模型來(lái)實(shí)現(xiàn)互動(dòng)的,這一技術(shù)成本高且耗時(shí)耗力。早從《是誰(shuí)陷害了兔子羅杰》開始,就出現(xiàn)了真人加動(dòng)畫的影片制作。后來(lái)的《美女闖通關(guān)》堪稱爛片的極致,布拉德·皮特(Brad Pitt)大概都不愿承認(rèn)拍過這部片子了吧。麻省理工的這一技術(shù)可使真實(shí)視頻和計(jì)算機(jī)繪圖結(jié)合更容易,其應(yīng)用當(dāng)然也不僅限于《是誰(shuí)陷害了兔子羅杰》和《美女闖通關(guān)》這樣的電影了。
麻省理工認(rèn)為《口袋妖怪Go》如果能應(yīng)用這一技術(shù)將會(huì)十分有趣。設(shè)想一下,你在灌木叢中看到“妙蛙種子”,而隨著“妙蛙種子”的跳動(dòng),灌木也會(huì)隨著晃動(dòng),是不是有趣的很。同樣,在電影拍攝中,將外星人侵略地球的場(chǎng)景視覺化也會(huì)更容易。
這一技術(shù)成功站在了VR與AR技術(shù)的浪尖。令人興奮的是它可以大大降低互動(dòng)性VR體驗(yàn)的研發(fā)成本。畢竟人們希望看到可證明VR存在價(jià)值的實(shí)例,而CSAIL的這一項(xiàng)目意味著VR視頻可實(shí)現(xiàn)雙向互動(dòng)了。