【彩蛋特輯】AI修復(fù)技術(shù):點(diǎn)幾下按鈕就能復(fù)原老北京?

2020-05-19 18:18:4807:18 1195
聲音簡(jiǎn)介

更新提醒 

每周二和周五更新

點(diǎn)擊右上角免費(fèi)訂閱↑↑↑

本期原文 

大家好,我是郝景芳。今天這期節(jié)目是我們的彩蛋特輯。


愛好科技的你應(yīng)該也聽說了,前陣子有位叫大谷的北京小伙,用AI修復(fù)技術(shù),將一段百年前老北京的黑白影像視頻,變成了彩色的世界。讓網(wǎng)友們實(shí)實(shí)在在體驗(yàn)了一把穿越的感覺。有人說,視頻里的他們大概根本想象不到,自己當(dāng)年的一舉一動(dòng),會(huì)在一百年后的今天,被我們以這種特別的方式看到,這大概就是科技發(fā)展的魅力吧。


其實(shí),AI修復(fù)作為一項(xiàng)肉眼可見的視覺技術(shù),不僅賦予古老影像獨(dú)特的魅力,更將前沿技術(shù)與歷史情感相結(jié)合,讓我們感受到一種區(qū)別于傳統(tǒng)科技的非理性浪漫。我自己在看到這個(gè)視頻時(shí),也是非常喜歡的,忍不住想跟大家聊聊有關(guān)AI修復(fù)的那點(diǎn)事兒。


AI修復(fù)技術(shù)入門


我想先請(qǐng)大家思考一個(gè)問題,那就是,AI修復(fù)技術(shù)真的那么高不可攀嗎?


就拿這個(gè)視頻來說吧,你在觀看的過程中,會(huì)不會(huì)覺得,AI修復(fù)技術(shù)的過程一定復(fù)雜又難懂。對(duì)于這個(gè)問題,折疊宇宙的小伙伴專門采訪了視頻制作人大谷。他認(rèn)為,人工智能,其實(shí)是大家都可以嘗試學(xué)習(xí)的,哪怕沒有編程基礎(chǔ)也可以跟著一步一步學(xué)。制作這個(gè)視頻的同時(shí),也是希望能起到一個(gè)普及性的作用。


他不認(rèn)為人工智能就一定是高大上,晦澀難懂的,而是一個(gè)在現(xiàn)實(shí)生活中可以有很多實(shí)際應(yīng)用的技術(shù)。在修復(fù)這段視頻的時(shí)候,他用到的工具,也都是開源社區(qū)里公開分享的小工具,用他的話說,主要按鈕點(diǎn)一下就可以,稍微調(diào)調(diào)設(shè)置,大部分工作都是人工智能電腦自己做的。


AI修復(fù)技術(shù)過程初探


聽到這兒,你可能會(huì)問了,人工智能也太神奇了吧!這個(gè)視頻到底是怎么修復(fù)的呢?


我們都知道,由于當(dāng)年的技術(shù)限制,許多老電影中的人物畫面看上去都像加速播放的。如果是用現(xiàn)在的電影技術(shù)標(biāo)準(zhǔn),調(diào)整老電影里的人物活動(dòng)速度。你會(huì)發(fā)現(xiàn),這個(gè)老視頻里1秒基本上只有6-10幀,那就沒法形成連貫的動(dòng)態(tài)畫面。所以要做的第一步,就是補(bǔ)幀。把這個(gè)老視頻里不穩(wěn)定的幀數(shù),都修成160幀。


這個(gè)過程其實(shí)類似我們平時(shí)常說的腦補(bǔ),而人工智能跟人類大腦處理影像畫面是很相似的,比如老視頻里,第一幀里手臂的角度是10度,第二幀里變成了30度。人工智能就能想象中間缺少的那20度變化過程。隨后根據(jù)參數(shù)設(shè)置,人工智能負(fù)責(zé)腦補(bǔ),把中間的15度,25度都畫出來,或者根據(jù)你的要求把11度、12度、13度,全部畫出來。


第二步要做的,就是調(diào)整分辨率,也就是我們所說的,把畫質(zhì)變得高清。這也是人工智能可以做到的腦補(bǔ)。通過分析得出,畫面中的哪些模糊部分是由于畫質(zhì)過低造成的,然后去完成優(yōu)化。第三步則是上色,在一個(gè)叫DeOldify的小工具里,可以設(shè)置分辨率、顏色的飽和度、畫面視覺風(fēng)格等等。


這個(gè)人工智能依賴一個(gè)數(shù)據(jù)集,具備了區(qū)分黑白電影和彩色電影的差異。通過觀看4-6萬張圖片和視頻,它學(xué)會(huì)了人的皮膚是肉色的,天空是藍(lán)色的,植物大多是綠色的。當(dāng)它學(xué)了足夠多以后,就能根據(jù)畫面形狀分辨出這是什么東西,分析出人、馬車、藍(lán)天等事物,然后完成填色。到這里,AI修復(fù)工作也就基本完成了。


AI修復(fù)技術(shù)尚未成熟


當(dāng)然了,AI修復(fù)技術(shù)雖然神奇,但并不是萬能的。在這里我要做一個(gè)小小的糾正,其實(shí)這個(gè)視頻中的AI修復(fù),與其說是還原,不如說是二度創(chuàng)作更準(zhǔn)確些。


為什么這么說呢?


我們都知道,人工智能是基于人腦思維被制造出來的現(xiàn)代產(chǎn)物,所以它的數(shù)據(jù)集也決定了它的知識(shí)儲(chǔ)備。比如我們?cè)谝曨l中看到的服飾顏色,大多是灰色布衣。但在真實(shí)的歷史中,這個(gè)人穿的可能是紅色大襖,也可能是帶花紋的長(zhǎng)袍。所以,如果有更多基于中國(guó)文化的數(shù)據(jù)集加入進(jìn)去,比如,經(jīng)過史學(xué)家考據(jù)過的分析結(jié)果被加入到數(shù)據(jù)集里,那么這個(gè)人工智能,就可以更好的復(fù)原中國(guó)歷史,更接近100年前真實(shí)的北京。而目前人工智能所做到的,是一個(gè)合理的視覺效果呈現(xiàn),并非準(zhǔn)確的復(fù)原。


AI修復(fù)技術(shù)前景+爭(zhēng)議性討論


那么,隨著未來AI修復(fù)技術(shù)的飛速發(fā)展,會(huì)不會(huì)逐漸代替人類插畫師的工作呢?


剛剛我們也聊到了,人工智能可以像人類一樣去腦補(bǔ)畫面。比如,當(dāng)我們想象出一個(gè)不存在的人臉,人工智能會(huì)負(fù)責(zé)幫我們腦補(bǔ),直接把這個(gè)畫出來。如果藝術(shù)家用這種工具進(jìn)行創(chuàng)作,其實(shí)節(jié)約了很多時(shí)間。當(dāng)你想畫一個(gè)像狗的金魚、或者像金魚的狗,人工智能可以幫你畫出來,甚至有的AI作品會(huì)在畫廊進(jìn)行展覽。


在這個(gè)過程中,AI會(huì)幫助插畫師節(jié)省很多工作量。比如Nvidia(英偉達(dá))推出的人工智能輔助繪畫功能,創(chuàng)作者只要粗略地畫出山、水的線條輪廓,人工智能就會(huì)自動(dòng)完成全部的山、水創(chuàng)作。你還可以把物體的明暗交界、顏色飽和度等,直接告訴人工智能,讓人工智能去畫。很多游戲原畫師會(huì)用人工智能繪制背景,然后自己專注畫出游戲人物的細(xì)節(jié)部分。


所以,AI修復(fù)技術(shù)非但不會(huì)代替人類插畫師,反而會(huì)為他們提供幫助。也有越來越多的愛好者們使用這種技術(shù),嘗試修復(fù)老照片,古畫等等。不過也有人表示,AI修復(fù)后的作品,雖然更高清美觀,但卻少了些原有的意境。


比如,之前網(wǎng)上曾經(jīng)瘋傳了一張,AI修復(fù)后的林徽因舊照,雖然美麗,卻讓這位千古才女缺少了該有的韻味。所以,任何事物都有一定的利弊。用視頻制作人大谷的話來說, 當(dāng)里面的人也看著鏡頭,我也看著影片里的人,那一瞬間會(huì)有種歷史時(shí)空的交流感,希望通過這個(gè)視頻,能把我學(xué)習(xí)的過程分享給大家。


總結(jié)


好了,這期彩蛋特輯,我與你分享了AI修復(fù)技術(shù)的大致操作,以及與視頻制作人大谷的幕后采訪故事。聽完這期節(jié)目,你會(huì)不會(huì)覺得,其實(shí)AI修復(fù)并沒有想象中那么難,感興趣的話,不妨大膽嘗試一下,我等著你在討論區(qū)與我分享你的成果感悟。歡迎繼續(xù)走進(jìn)折疊宇宙的世界,我是郝景芳,我們下期節(jié)目再見。


備注:感謝視頻AI修復(fù)制作人大谷Spitzer接受采訪,提供寶貴經(jīng)驗(yàn)。

用戶評(píng)論

表情0/300
喵,沒有找到相關(guān)結(jié)果~
暫時(shí)沒有評(píng)論,下載喜馬拉雅與主播互動(dòng)
猜你喜歡
彩蛋

無論一部電影好看與否,都存在值得挖掘的彩蛋。

by:播客公社

敏寶特輯

親愛的各位敏媽們,當(dāng)我們的寶寶因?yàn)檫^敏反應(yīng)而備受折磨的時(shí)候,最心疼和最痛苦的其實(shí)是作為母親的我們。有很多的心聲,就連寶爸都無法理解,只有我們自己能夠感同身受!你...

by:媛筱瀟_北辰劇社

北島特輯

北島是文革后期興起的朦朧詩(shī)派的重要代表,他最著名的詩(shī)歌如《回答》、《—切》、《宣告》、《結(jié)局或開始》等,曾經(jīng)震撼了無數(shù)國(guó)人,表達(dá)了在文革中成長(zhǎng)的一代人信仰失落后...

by:子橙心

空氣特輯

親近自然,感受空氣

by:漠北逐狼

點(diǎn)歌特輯

小夜曲之點(diǎn)歌特輯點(diǎn)歌方式:關(guān)注以下賬號(hào)留言或私信喜馬拉雅——“武漢大學(xué)廣播頻道”微博@武漢大學(xué)廣播臺(tái)官Q(mào)“武漢大學(xué)廣播臺(tái)”(QQ號(hào):3092981320)

by:武漢大學(xué)廣播頻道

半島特輯

不好歸類的節(jié)目,都在這里哦。

by:半島FM_