人工智能對黑白照片的還原,感動了人們對往事的追憶,其操作步驟並不復雜。在“AI還原老照片”的視頻中,胡經過AI色彩還原、AI清晰度增強、人臉精細化、手繪微調幾個步驟,在人工智能的幫助下“復活”了。
那麽,這項神奇的技術是如何實現的呢?
AI修復照片的步驟及其背後的算法
壹般來說,修復照片主要有三個步驟——找瑕疵、修復瑕疵、上色。由於胡復原的照片沒有明顯破損,他展示的步驟主要是上色的步驟。發現和修復缺陷是壹個“訓練”算法的過程,需要在大量的圖片中進行缺陷標記和修復,才能為後續的自動修復構建完善的算法模型。
為了方便大家學習,胡公布了自己的開源項目——paddle gan和DFDNet。背後的GAN和DFDNet是人工智能修復照片的常用算法。
GAN,即生成對抗網絡,它的模型通過兩個模塊——生成模型和判別模型的交互作用,達到生成圖片的結果。生成模型負責生成圖片,比如給定壹系列小狗圖片後,生成壹張不屬於給定圖片的小狗圖片。判別模型負責將生成模型生成的圖片與真實圖片區分開。它的“互動”過程類似於生成的圖片“探索”出壹只三只眼的小狗的生成,被判別模型“回擊”後,它學習到小狗不是三只眼。兩者相互作用的結果是,生成的模型最終可以生成壹個“假”圖片,使得判別模型無法將其與真實圖片區分開來。
DFDNet,即深度人臉字典網絡,是基於不同人的人臉的四個組成部分——兩只眼睛、鼻子和嘴巴——基本相似的事實,算法可以通過對比大量不同的高清人臉圖像來構建人臉組成部分的“字典”。用的時候可以“匹配”,就像字典裏從第壹個字母開始縮小範圍壹樣。妳可以用這個過程來指導面部修復。
人工智能修復照片算法的其他應用
人工智能修復老照片的技術不僅可以修復黑白、高糊、破損的照片,還可以修復黑白電影。它的好處不僅僅是“回憶過去”。在還原歷史細節的同時,不僅僅是還原照片,更是傳承了壹種文化。
隨著5G時代的到來,在大數據和雲計算的“加持”下,AI膠片還原的技術甚至可以用於即時視頻的實時還原和優化,解決畫面不清晰、抖動和噪點等問題...多種技術的結合,可以帶來AI在安防、交通、醫學影像、影視拍攝、直播等行業的廣泛應用。
專家:於涵,中國傳媒大學副教授。