微博博主@大谷Spitzer 5 月 8 日上傳了一段視頻,在全網(wǎng)都掀起了轉(zhuǎn)發(fā)熱潮。
他將一段加拿大攝影師于
1920-1929 年拍攝的民國(guó)年間的北京街景黑白視頻,通過(guò) AI 完成了上色、修復(fù)幀率和超分辨率,帶網(wǎng)友們穿越回百年前,感受昔日繁華。
原視頻來(lái)自《人民日?qǐng)?bào)》四年前發(fā)布的一段資料影像,由加拿大攝影師在 1920~1929 年間拍攝,至今正好是一百年整。
整段視頻時(shí)長(zhǎng) 10:12,帶領(lǐng)大家穿越回百年前的北京
公歷 1920 年也就是民國(guó)九年,正是中華民國(guó)的北洋政府時(shí)代。
這段時(shí)間中,中國(guó)也相繼發(fā)生了「廢除二十一條運(yùn)動(dòng)」、「孫中山逝世」、「段祺瑞宣告成立臨時(shí)政府」等重要的歷史事件。
正值第一次世界大戰(zhàn)結(jié)束,中國(guó)獲得了短暫的喘息,也正是這幾年里,國(guó)內(nèi)的早期工業(yè)獲得了不錯(cuò)的增長(zhǎng)機(jī)會(huì)。
90 后的獨(dú)立游戲開(kāi)發(fā)者@大谷Spitzer
該項(xiàng)目的作者,是一位 90 后的獨(dú)立游戲開(kāi)發(fā)者胡文谷,出生于北京,本科畢業(yè)于中國(guó)人民大學(xué)的藝術(shù)學(xué)、研究生畢業(yè)于紐約視覺(jué)藝術(shù)學(xué)院,目前在紐約從事獨(dú)立游戲開(kāi)發(fā)的工作。
胡文谷(微博:@大谷Spitzer)作為藝術(shù)家,音樂(lè)家,程序員和游戲設(shè)計(jì)師,他從事游戲開(kāi)發(fā)和音樂(lè)工作已超過(guò)10年。
代表作:《漫展模擬器》《Eddy紫》等,Eddy Violet 是他的 50 多個(gè)游戲作品之一,在中國(guó)獲得了 10 萬(wàn)次下載。
作品集:http://dgspitzer.my-style.in/gameportfolio/
這段視頻通過(guò) AI 完成了上色、修復(fù)幀率、超分辨率的部分。
音效來(lái)自網(wǎng)絡(luò),背景曲目北京民樂(lè)大師的作品,其中道教音樂(lè)來(lái)自北京白龍觀的錄音影像。技術(shù)管線參考自 Denis Shiryae 的影像修復(fù)教程。
視頻截圖:作者提出的修復(fù)前后對(duì)比
作者在
幀率修復(fù) 部分使用的是由上海交大博士 Bao Wenbo 開(kāi)源的
DAIN 插幀算法
(項(xiàng)目地址:https://github.com/baowenbo/DAIN)
給定兩個(gè)時(shí)刻的輸入幀,先估計(jì)光流和深度圖,然后使用建議的深度感知流投影層生成中間流。
分辨率增強(qiáng) 部分使用了
ESRGAN,一個(gè)基于 GAN 的增強(qiáng)超分辨率方法。
視頻上色 部分使用了
DeOldify ,這是一個(gè)是用于著色和恢復(fù)舊圖像及視頻的深度學(xué)習(xí)項(xiàng)目。由一位加州的藝術(shù)家工程師在 Github 上進(jìn)行開(kāi)源
(項(xiàng)目地址:https://github.com/jantic/DeOldify)
DeOldify 采用了 NoGAN 這樣一種新型的、高效的圖像到圖像的 GAN 訓(xùn)練方法。細(xì)節(jié)處理效果更好,渲染也更逼真。
還用
VirtualDub 軟件對(duì)視頻進(jìn)行了老電影降噪部分的處理。
最后,這樣一段時(shí)長(zhǎng)十分鐘的視頻,就這樣通過(guò)開(kāi)源算法和軟件的完美結(jié)合,呈現(xiàn)到了我們眼前,帶領(lǐng)網(wǎng)友們穿越回民國(guó),感受了一回北京的繁華街景。
免責(zé)聲明:整理文章為傳播相關(guān)技術(shù),版權(quán)歸原作者所有,如有侵權(quán),請(qǐng)聯(lián)系刪除
兩輪平衡機(jī)器人送披薩,旋轉(zhuǎn)跳躍!
若覺(jué)得文章不錯(cuò),轉(zhuǎn)發(fā)分享,也是我們繼續(xù)更新的動(dòng)力。
5T資源大放送!包括但不限于:C/C++,Linux,Python,Java,PHP,人工智能,PCB、FPGA、DSP、labview、單片機(jī)、等等!
在公眾號(hào)內(nèi)回復(fù)「
更多資源
」,即可免費(fèi)獲取,期待你的關(guān)注~
長(zhǎng)按識(shí)別圖中二維碼關(guān)注
免責(zé)聲明:本文內(nèi)容由21ic獲得授權(quán)后發(fā)布,版權(quán)歸原作者所有,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。文章僅代表作者個(gè)人觀點(diǎn),不代表本平臺(tái)立場(chǎng),如有問(wèn)題,請(qǐng)聯(lián)系我們,謝謝!