當前位置:
首頁 > 新聞 > GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

【新智元導讀】黑白老照片上色已經不足為奇了,但是讓黑白老電影還原彩色還是非常新鮮有趣的意見事情。近日,Twitter上有一位小哥研究了一個名為DeOldify的工具,可以讓黑白老電影以及老照片復原其本色。

誰說經典只屬於黑白?

最近,一位名叫Jason Antic的小哥在Twitter上大火了一把,它創建的DeOldify工具,可以讓過去的黑白視頻和照片秒變彩色

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

這個神器一出,可把網友們高興壞了,紛紛開始玩兒了起來。目前在GitHub上5800+星,相當火爆!

卓別林的電影瞬間年輕、有「味道」了許多。

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

1960年的經典電影《Psycho》:

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

1936年的經典電影《Reefer Madness》:

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

1927年的經典電影《Metropolis》:

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

DeOldify不僅能讓視頻恢複色彩,還能讓黑白老照片秒變彩照。

《移民母親》,Migrant Mother by Dorothea Lange (1936)

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

"Toffs and Toughs" by Jimmy Sime (1937)

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

中國鴉片吸食者(1880)

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

這些黑白的視頻和照片,當換上了彩色的「衣服」時,不得不說拉近了與我們的距離,並不覺得那麼得有年代感了。

讀者們可以手動試試為黑白老照片添色了!地址如下:

https://colorize.cc/

只需要從本地上傳或者添加圖片的鏈接,輸入郵箱即可收到,非常的方便。

新智元便試了一下「慈禧太后」的黑白照,結果如下:

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

可以說,是相當的逼真了!

神奇的DeOldify背後的利器:NoGAN

作者在GitHub中提到,DeOldify中至關重要的就是NoGAN。NoGAN訓練結合了GAN訓練的優點(絢爛的色彩),同時消除了令人討厭的副作用(如視頻中閃爍的物體)。作者表示視頻是使用孤立的圖像生成,沒有任何形式的時間建模附加。該過程執行30-60分鐘的GAN部分的「NoGAN」訓練,一次使用1%到3%的imagenet數據。然後,與靜態圖像著色一樣,在重建視頻之前,對單個幀進行「去舊化」。

除了提高視頻的穩定性,還有一件有趣的事情值得一提。事實證明,運行的模型,甚至是不同的模型和不同的訓練結構,都或多或少地得出相同的解決方案。你可能認為有些東西的顏色是隨意的、不可知的,比如衣服的顏色、汽車的顏色,甚至是特效(就像《大都會》里看到的那樣)。

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

作者對此的猜測是這些模型正在學習一些有趣的規則,關於如何根據黑白圖像中出現的細微線索來著色。這個結果導致了非常確定和一致的結果,這意味著你沒有跟蹤模型著色決策,因為它們不是任意的。此外,它們看起來非常健壯,所以即使在移動場景中渲染也是非常一致的。

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

那麼NoGAN是什麼呢?

這是作者開發的一種新型GAN訓練模型,用來解決之前DeOldify模型中出現的一些關鍵問題。

它提供了GAN訓練的好處,同時花費最少的時間進行直接的GAN訓練。在非常短的實際GAN訓練期間,發生器不僅獲得了過去需要數天逐步調整大小的GAN訓練的完全逼真的著色能力,而且它也幾乎沒有產生任何GAN的「副作用」。據作者介紹,這是一種非常有效的新技術。

下圖是原始DeOldify模型的效果,可以看出不同幀的顏色是存在差異的。

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

下面是基於NoGAN的DeOldify模型,可以看到著色效果非常好。

GitHub5800星!一鍵還原百年老電影、黑白舊照片本色

為什麼是三個模型?

DeOldify現在有三種型號模型可供選擇。每個都有關鍵優勢和劣勢,因此具有不同的用例。

更多細節內容可以訪問查看GitHub:

https://github.com/jantic/DeOldify/blob/master/README.md

喜歡這篇文章嗎?立刻分享出去讓更多人知道吧!

本站內容充實豐富,博大精深,小編精選每日熱門資訊,隨時更新,點擊「搶先收到最新資訊」瀏覽吧!


請您繼續閱讀更多來自 新智元 的精彩文章:

巫術!AI演算法讓老遊戲舊貌換新顏
免費!Google Colab現已支持英偉達T4 GPU

TAG:新智元 |