換頭假視頻固然有爭議,但「深度視頻肖像」這項技術潛力無限
今年4月,一段奧巴馬大罵特朗普是「傻子」的視頻迅速傳開。實際上,這來自於一款視頻換頭術Deepfakes——將名人的臉完美移植到普通人的臉上,輕易就能偽造一段名人語錄。此刻,眼見也不一定為實。
不過很快,大眾發現Deepfakes既不合情理又不夠有說服力,就在這項技術即將過氣之時,修復升級版的「深度視頻肖像」(Deep Video Portraits,以下簡稱DVP)捲土重來,與此同時,專業打假軟體Truepic獲得了800萬美元投資,專門針對Deepfakes進行Reddit網站的圖片查證。
本期全媒派(ID:quanmeipai)帶來這兩項技術的詳細介紹和解讀。
(關於Deepfakes的技術細節和影響,可閱讀往期文章《「有視頻有真相」的時代終結:換頭拼接假視頻滋長,真實世界「夢碎了」?》)
深度視頻肖像 Deep Video Portraits
上為Deepfakes,下為DeepVideo Portraits
DVP技術其實是一項有趣的研究成果,和Deepfakes的「名人臉成人電影影星身」的置換不能混為一談,二者甚至並不是基於同樣的深度學習進行的圖像處理。相較而言,DVP有更高的應用價值和更大的想像空間。
事實上,DVP就是去年8月在計算機圖形專業組舉辦的年會SIGGRAPH收到的一篇論文的標題,指的是一種能複製動作、面部表情和演講動作的圖像學習技術,如下圖。
DVP的特別之處,在於其綜合性。以上圖為例,DVP能抓取到目標人物如奧巴馬的面部、眉毛、嘴角甚至背景環境的構成,分析他們如何協調運動。接下來,抓取源視頻中的同等元素,如測試者自己的動作和表情等視覺信息,安放到奧巴馬的臉上。
完成嫁接的視頻上,你不止能看到目標人物的身體和臉部動作和測試者一致,甚至連微表情也能同步。湊近看,連人物背後的影子都是重合的。
研究人員將原視頻和嫁接視頻放在一起比對,發現二者的差異微乎其微。所以,DVP能讓任何一個你希望的人出現在鏡頭中,說一些他從來沒說過的話,當然,都是你安排的,用的也是你的聲音。這對於電影或電視劇來說太重要了,通過同步演員的表情和聲音,可以進一步改善配音電影或電視劇的質量。
Gif:
GIF
不過,DVP無法讓目標人物做出和測試者在攝像機前的表情相差甚遠的表情。比如說,一個人全程垮著臉,系統無法虛構一個咧嘴笑來。目前,DVP還存在一定局限性,大有提升空間。同以往的技術相比,已經有了極大的進步。
論文的聯合作者Justus Theis表達了對新技術在道德層面上的擔憂。「這也是我們選擇公開發表研究結果的原因,讓大眾了解這項技術的可能性,這一點很重要。」
如果你有意開一家視頻取證公司,那麼機會來了:用深度學習系統來檢測基於深度學習的圖像處理會有極大助力。
Truepic:專業照片查證
為了防止出現Deepfakes頭不對身的情況,Reddit的Ask Me Anything Q&As開始啟用Truepic公司的查證技術,驗證廣告中的出鏡人員是否為本人,通常拍攝者為名人。
Truepic的工作原理通常分為五步:
用Truepic應用獲取一張照片;
Truepic驗證圖像是否已經被更改,並加上時間戳,地理編碼,URL和其他元數據作為水印;
Truepic的安全伺服器將存儲該照片的一個版本,並配備一個六位數的代碼和URL,加上一個固定的區塊鏈;
用戶可以將他們的Truepic發布到應用程序中,以證明他們不會在約會網站上編造身份,做電商售賣等;
觀眾可以訪問照片上的水印URL,和保存的圖片進行比較,以確保在事後沒有做過修改。
據了解,Truepic公司獲得了800萬美元的A輪,投資方包括前道林資本合伙人、前湯森路透CEO Jeffrey Parker,哈佛商學院教授William Sahlman等,他們都不是傳統的創投圈人士。事實上,Truepic技術也曾用於查證Tinder和Airbnb的網站圖片是否造假,去年5月獲得180萬美元的種子輪投資。
近幾年,假新聞泛濫帶來大規模恐慌,加劇了社會的不信任感,而技術,如AI的進步使得造假成本進一步降低,造假的方式卻越來越多樣。這同時也會催生出更有正面意義技術,如DVP,以及專業的打假查證技術Truepic。你怎麼看待這些新技術,有哪些問題需要注意?歡迎在留言區分享你的看法。
※宣傳片怎麼拍才能毫無安利感?這些頂級媒體的神操作可以借鑒
※尼古拉斯·卡爾:數字烏托邦中,人類如何避免淪為技術奴役
TAG:全媒派 |