小伙AI修復(fù)百年前北京影像是真的嗎 小伙AI修復(fù)百年前北京影像在哪里看

最近，一段由AI修復(fù)的“100年前的北京晚清影像”在社交平臺(tái)上火了。整個(gè)視頻長(zhǎng)約10分鐘，把一段大約拍攝于百年以前、看起來(lái)有些卡頓的黑白紀(jì)錄片，變成了宛若油畫(huà)的彩色視頻。

截至我們發(fā)稿時(shí)，這段視頻在微博上的播放量高達(dá)1748萬(wàn)，在B站的播放量則超過(guò)了70萬(wàn)。許多網(wǎng)友留言稱視頻的逼真效果打破了他們的想象，仿佛已經(jīng)聞到百年前北京街頭的香火味。

播放量超過(guò)1700萬(wàn)、點(diǎn)贊57萬(wàn)的AI修復(fù)視頻。圖自微博。

視頻的制作者，是獨(dú)立藝術(shù)家、游戲制作人大谷Spitzer。今年28歲的他早在初中時(shí)就開(kāi)始制作獨(dú)立游戲，是個(gè)會(huì)編程、作曲和畫(huà)畫(huà)，同時(shí)兼做B站Up主的斜杠青年。如今，他在紐約生活和工作，疫情期間還跟朋友做了一款造口罩的小游戲。

在此次視頻火爆之前，大谷Spitzer其實(shí)已經(jīng)在B站上傳過(guò)不少有關(guān)AI的視頻，包括AI作曲、AI去馬賽克、AI“生成老婆”等等。他甚至還用AI作了一款足球游戲，讓大家看到傻乎乎的AI球員是如何進(jìn)化到可以碾壓人類(lèi)玩家的。

在大谷Spitzer看來(lái)，AI好玩的地方在于，可以讓很多想象變成現(xiàn)實(shí)，把很多不可言說(shuō)的東西具象化。他自稱只是AI領(lǐng)域的初學(xué)者，也希望通過(guò)一系列視頻讓大家看到，AI并不是那么“高大上”的東西，人人都可以用AI來(lái)表達(dá)和創(chuàng)作。

下面是南都·AI前哨站與大谷Spitzer（以下簡(jiǎn)稱“大谷”）的對(duì)話。

····

用三種AI工具還原1920年代的北京

南都：怎么想到對(duì)這個(gè)紀(jì)錄片做AI修復(fù)的？

大谷：我之前做了一些介紹AI技術(shù)的科普視頻，其中也包括影像修復(fù)的AI技術(shù)。前段時(shí)間偶然看到這個(gè)紀(jì)錄片，覺(jué)得用AI來(lái)修復(fù)它應(yīng)該蠻有意思的。里面有很多路人在看鏡頭的畫(huà)面，就好像他透過(guò)鏡頭在看著我、跟我互動(dòng)。但我們相隔了100年，彼此都不知道對(duì)方的生活是什么樣的。如果能把紀(jì)錄片修復(fù)一下，讓100年前的北京更活靈活現(xiàn)地呈現(xiàn)出來(lái)，效果應(yīng)該會(huì)很不錯(cuò)。

修復(fù)視頻中“穿越百年”的對(duì)視。

南都：修復(fù)過(guò)程是怎樣的？

大谷：修復(fù)過(guò)程主要用了三種AI工具，分別用來(lái)補(bǔ)幀、上色和分辨率擴(kuò)增。原版紀(jì)錄片每秒只有6到10幀，看起來(lái)非?？D。我用DAIN（AI工具名稱）來(lái)補(bǔ)充中間的畫(huà)面，讓視頻變成每秒播放60幀左右，看起來(lái)會(huì)更加連貫。

上色我用的是DeOldify（AI工具名稱），最后出來(lái)的效果還湊合吧。不滿意的地方在于AI肯定沒(méi)法保證準(zhǔn)確性，因?yàn)樗鼘?duì)清代的歷史并不了解，只是根據(jù)它學(xué)習(xí)數(shù)據(jù)庫(kù)的經(jīng)驗(yàn)去上色。未來(lái)這種技術(shù)應(yīng)該會(huì)變得越來(lái)越好。

分辨率擴(kuò)增用的是ESRGAN（AI工具名稱），它是可以把低分辨率的圖像變成4K級(jí)別的分辨率。

大谷在視頻中展示的對(duì)比效果。

南都：看到你微博上說(shuō)，為了做修復(fù)視頻，還借了朋友的顯卡？

大谷：對(duì)，因?yàn)樗娘@卡是比較新的，用的GPU芯片更好?，F(xiàn)在的AI工具雖然也支持CPU渲染，但速度會(huì)非常非常慢，比GPU要慢10倍。所以還是推薦用GPU來(lái)做。

南都：你是怎么知道這個(gè)視頻火了的？

大谷：我在微博上發(fā)了視頻后就去健身了，回來(lái)一看竟然有一萬(wàn)多次轉(zhuǎn)發(fā)。當(dāng)時(shí)還想是不是電腦中毒了。反正挺突然挺意外的。

微博中的網(wǎng)友評(píng)論。

南都：視頻火了之后，有沒(méi)有讓你印象深刻的網(wǎng)友反饋？

大谷：一個(gè)是原版紀(jì)錄片拍攝的時(shí)間，大家其實(shí)有再討論。我查到的資料都顯示它拍攝于1920年到1929年之間，但也有網(wǎng)友根據(jù)片子里的建筑物推測(cè)拍攝時(shí)間是1918年以前。如果按照資料的說(shuō)法，1920年之后其實(shí)已經(jīng)是民國(guó)初年了，不是我最初所說(shuō)的“晚清”。歷史沒(méi)學(xué)好，感謝大家的指正。

另外有很多朋友在交流片子里出現(xiàn)的樂(lè)器啊、儀式啊，讓我學(xué)到挺多老北京的民俗文化知識(shí)。還有一個(gè)網(wǎng)友特別有意思，他說(shuō)他穿越過(guò)來(lái)以后很久沒(méi)有看到過(guò)這樣的視頻了，讓他很感動(dòng)，好像回到了以前。意思就是他是個(gè)穿越者，哈哈。

南都：這兩天網(wǎng)上也出現(xiàn)了很多“搬運(yùn)”，你對(duì)此怎么看？

大谷：這個(gè)視頻畢竟也不是我拍的，是100年前的一個(gè)加拿大哥們兒拍的，大家去轉(zhuǎn)發(fā)也挺好的，只要注明出處就行。有個(gè)別的轉(zhuǎn)發(fā)會(huì)把我的名字打碼，這樣就會(huì)感覺(jué)怪怪的。

大谷的工作臺(tái)。受訪者供圖。

····

希望人人都能用AI工具進(jìn)行創(chuàng)作

南都：你在B站其實(shí)還上傳了很多AI相關(guān)的視頻，比如AI作曲、AI人臉生成等。是怎樣萌生對(duì)AI的興趣的？

大谷：我的主業(yè)是游戲開(kāi)發(fā)，在AI領(lǐng)域只是一個(gè)初學(xué)者。但是在現(xiàn)階段，很多AI工具已經(jīng)很方便了，你不需要特別深入地了解編程知識(shí)，只要在工具里輸入一些簡(jiǎn)單的指令就可以操作。我做這些是希望能讓大家了解到，人工智能可以被應(yīng)用到現(xiàn)實(shí)生活里，效果也比較有意思。

AI好玩的地方在于，它可以讓你的很多想象變成現(xiàn)實(shí)，把很多不可言說(shuō)的東西具象化。舉個(gè)最通俗的例子，基努·里維斯和蒙娜麗莎如果結(jié)婚了，他們的孩子長(zhǎng)什么樣？現(xiàn)在就有一種AI工具可以模擬出來(lái)。

也正是因?yàn)檫@樣，AI給流行藝術(shù)的創(chuàng)作帶來(lái)了更多的靈感。我也看到很多當(dāng)代藝術(shù)家在用AI來(lái)做可以交互的新媒體作品、裝置作品。

大谷在B站上傳了一系列AI相關(guān)的科普向視頻。

南都：你之前主要是作為獨(dú)立游戲制作人為大家所熟知的。在你看來(lái)，AI能給游戲制作帶來(lái)哪些變化？

大谷：英偉達(dá)的實(shí)驗(yàn)室發(fā)布過(guò)一個(gè)工具，你可以在上面做很簡(jiǎn)單的涂鴉，說(shuō)這是一座山。然后AI就會(huì)根據(jù)涂鴉的形狀生成一個(gè)真正的山脈圖像?，F(xiàn)在很多游戲畫(huà)師用這個(gè)工具來(lái)制作游戲場(chǎng)景。

英偉達(dá)實(shí)驗(yàn)室發(fā)布的GauGAN工具，可以根據(jù)涂鴉生成逼真的畫(huà)面。

我之前還用Unity游戲引擎的Ml-agents工具做了一個(gè)足球游戲，就是讓兩隊(duì)足球運(yùn)動(dòng)員在里面不斷地踢球，我只給它們一個(gè)規(guī)則：進(jìn)球得分，輸球扣分。剛開(kāi)始那些球員特別傻，啥都不知道，就到處亂撞。偶然把球撞進(jìn)去了，發(fā)現(xiàn)能得分，它就會(huì)慢慢學(xué)著贏。訓(xùn)練完的時(shí)候我自己作為一個(gè)玩家加入進(jìn)去，控制其中一個(gè)球員，發(fā)現(xiàn)我已經(jīng)踢不過(guò)AI球員了。這個(gè)過(guò)程非常有趣。

游戲中的訓(xùn)練場(chǎng)景。

南都：大家談到AI的時(shí)候，往往會(huì)更關(guān)注“AI讓人類(lèi)失業(yè)”的問(wèn)題。你對(duì)此怎么看？

大谷：我覺(jué)得也不用這么悲觀吧。比如我做獨(dú)立游戲開(kāi)發(fā)，音樂(lè)、美術(shù)、程序都要做，一個(gè)人其實(shí)挺耗時(shí)間的。用AI的話會(huì)減少一些勞動(dòng)，幫我省一些時(shí)間。在社會(huì)的很多方面，AI都能起到這種作用，讓大家的生活更便利。它可能確實(shí)會(huì)淘汰一些工作崗位，但也會(huì)創(chuàng)造出新的工作崗位，讓人能夠去做更有創(chuàng)造性的工作。

我做了一系列的AI的視頻，也是希望能讓大家看到，AI不是一個(gè)特別高大上的東西，大家也可以去用它來(lái)輔助自己的創(chuàng)作，包括修復(fù)家里的一張老照片之類(lèi)的。

南都：未來(lái)還想用AI工具做什么樣的視頻？

大谷：我有計(jì)劃在做一個(gè)時(shí)裝類(lèi)的，AI工具可以把平面的衣服圖像自動(dòng)“穿到”一段視頻里的真人模特身上。你畫(huà)平面的話衣服就只有一面嘛，它能幫你補(bǔ)充出衣服的各個(gè)角度。

····

疫情期間開(kāi)發(fā)公益小游戲宣傳抗疫進(jìn)展

南都：疫情這段時(shí)間一直在紐約嗎？生活怎么樣？

大谷：在紐約的中國(guó)人其實(shí)一直很關(guān)注疫情的情況，我在紐約只有16個(gè)確診病例的時(shí)候就開(kāi)始居家隔離了，周?chē)呐笥岩苍诨ハ嗨涂谡?，所以整體感覺(jué)還好，就“以靜制動(dòng)”吧。當(dāng)然這段時(shí)間一直有救護(hù)車(chē)和直升機(jī)在窗外經(jīng)過(guò)，那個(gè)緊張的氣氛還是在的。

南都：為什么會(huì)想到和朋友開(kāi)發(fā)《全民造口罩》這款游戲？

大谷：2月10日的時(shí)候，CiGA（中國(guó)獨(dú)立游戲聯(lián)盟）發(fā)起了一個(gè)線上游戲開(kāi)發(fā)征集活動(dòng)，號(hào)召大家用游戲的方式來(lái)支持中國(guó)和武漢，我和朋友決定參與。當(dāng)時(shí)紐約的街頭雖然看起來(lái)跟往常一樣，但口罩已經(jīng)全部脫銷(xiāo)了，我們就選擇了“造口罩”這個(gè)主題。我們?cè)谟螒蚶镦溄恿艘恍﹣?lái)自官媒的疫情新聞，讓大家能夠從中了解疫情的情況。

游戲中的一些界面設(shè)置了知識(shí)鏈接，指向疫情相關(guān)的官方新聞。

南都：游戲發(fā)布后的效果達(dá)到了你的預(yù)期嗎？

大谷：還挺不錯(cuò)的。不過(guò)有一點(diǎn)想說(shuō)一下，因?yàn)檫@個(gè)游戲是CiGA的公益項(xiàng)目的一部分，我們的游戲完全免費(fèi)、沒(méi)有廣告和內(nèi)購(gòu)。但是游戲上線的第二天就出現(xiàn)了破解版，甚至還有飄著各種抽獎(jiǎng)、賭博信息的山寨版。這種還挺讓人受傷的，我也沒(méi)有時(shí)間精力去維權(quán)，還是希望大家能夠好好地玩游戲吧。

南都：你的一個(gè)身份是獨(dú)立游戲制作人。獨(dú)立游戲和普通的商業(yè)游戲有什么區(qū)別嗎？

大谷：大型公司去做游戲，會(huì)更多地考慮資本和盈利，它不會(huì)做特別冒險(xiǎn)的嘗試。獨(dú)立游戲就更體現(xiàn)開(kāi)發(fā)者的個(gè)人想法，可能會(huì)有很強(qiáng)烈的個(gè)人風(fēng)格。比如一個(gè)互動(dòng)小說(shuō)，開(kāi)發(fā)者可能就是想讓玩家去理解他的感受。還有“嚴(yán)肅游戲”，它是要教育玩家去學(xué)一個(gè)技能或者一種操作方法。

南都：你怎么看游戲和現(xiàn)實(shí)的關(guān)系？

大谷：我是一直把游戲當(dāng)做第九藝術(shù)，一種可以交互的藝術(shù)形式。游戲會(huì)讓開(kāi)發(fā)者和玩家達(dá)成心靈上的交流，就好像大家一起去創(chuàng)造一個(gè)世界。我覺(jué)得游戲也好，藝術(shù)也好，AI也好，通過(guò)不同的形式來(lái)把你的想法表達(dá)出來(lái)，讓大家去分享和創(chuàng)作，其實(shí)是很美好的經(jīng)歷。

南都：有什么讓你覺(jué)得會(huì)很感動(dòng)或溫暖的例子嗎？

大谷：我從高中到大二的時(shí)候做了一款叫做《Eddy紫》的游戲，特點(diǎn)就是整個(gè)游戲畫(huà)面特別特別紫（笑），好像傳得還挺廣。后來(lái)我在漫展賣(mài)這個(gè)游戲的光碟，有很多玩家過(guò)來(lái)跟我交流，還有人說(shuō)是因?yàn)槲也艊L試進(jìn)入游戲行業(yè)。

從2012年到2017年，大谷畫(huà)的《Eddy紫》主人公也有了變化。受訪者供圖。

還有就是我剛到美國(guó)的時(shí)候，去參加一個(gè)叫做Global Game Jam的48小時(shí)游戲開(kāi)發(fā)活動(dòng)，和6個(gè)不認(rèn)識(shí)的美國(guó)開(kāi)發(fā)者組隊(duì)。我當(dāng)時(shí)英語(yǔ)說(shuō)得還不是很溜嘛，其中一個(gè)叫Eric的哥們兒是學(xué)校老師，能聽(tīng)懂我說(shuō)話。所以每次都是我先說(shuō)，然后Eric再翻譯成其他人能聽(tīng)懂的英語(yǔ)。我們就這樣配合完成了游戲，拿了一個(gè)小獎(jiǎng)。

南都：你從挺小的時(shí)候就開(kāi)始玩游戲了。但直到現(xiàn)在，在中國(guó)的整個(gè)社會(huì)氛圍里，小孩玩游戲仍然并不是一件被鼓勵(lì)的事情。你會(huì)有什么作為“過(guò)來(lái)人”的想法想和大家分享嗎？

大谷：我小時(shí)候?qū)τ螒虍a(chǎn)生興趣其實(shí)是因?yàn)橐粋€(gè)廣告。里面是一個(gè)人在打游戲，看上去挺開(kāi)心的；然后過(guò)來(lái)一個(gè)人說(shuō)我做游戲，他看上去更開(kāi)心。我當(dāng)時(shí)就想做游戲這么有意思嗎？那我就試試看吧，家里也比較鼓勵(lì)。后來(lái)我也有參與全國(guó)中小學(xué)電腦制作活動(dòng)和中國(guó)大學(xué)生計(jì)算機(jī)設(shè)計(jì)大賽，拿了一些獎(jiǎng)。我覺(jué)得什么事情只要喜歡，那就去做吧。

當(dāng)然，過(guò)度游戲肯定是不對(duì)的，這方面還是需要家長(zhǎng)、學(xué)校去引導(dǎo)和教育。其實(shí)我覺(jué)得只要有好的引導(dǎo)，孩子都會(huì)向好的方向去走。

參加漫展活動(dòng)的大谷。受訪者供圖。