生成對抗網路研究人臉識別領域獲進展

最新 09-25

近日，中國科學院自動化研究所智能感知與計算研究中心在生成對抗網路基礎上提出高保真度的姿態不變模型（High Fidelity Pose Invariant Model，HF-PIM）來克服人臉識別任務中最為經典的姿態不一致問題。實驗結果表明，該方法在基準數據集上的表現的視覺效果和定量性能指標都優於目前最好的基於對抗生成網路的方法。此外，HF-PIM所支持的生成圖像解析度也在原有方法的基礎上提升了一倍。該論文被神經信息處理系統大會（NIPS）所收錄。

生成對抗網路的提出是繼深度神經網路之後的一大革命性新進展，已被《麻省理工科技評論》評為2018年「全球十大突破性技術」（10 Breakthrough Technologies 2018）。回看過去幾年的上榜技術，越來越多的人工智慧相關技術入選榜單，其中包括：2008年機器學習、2009年的Siri、2013年的深度學習、2014年的神經形態晶元、2016年的語音介面與知識分享型機器人，以及2017年的自動駕駛卡車與強化學習。在今年，最具突破性的人工智慧技術是對抗性神經網路（Dueling Neural Networks）/對抗式生成網路（GAN）——通過兩個AI系統的競爭對抗，極大化加速機器學習的過程，進而賦予機器智能過去從未企及的想像力。

近年來，自動化所孫哲南、赫然研究組在生成對抗網路的原理和應用的研究上取得了一系列的成果，先前已在IEEE國際計算機視覺與模式識別會議(CVPR)、國際計算機視覺大會（ICCV）上發表了一系列關於生成對抗網路和正面人臉圖像合成的研究工作，目前在國際上處於領先地位。

在該論文中，作者總結了先前工作中存在的一些限制（例如，過於依賴低維信息約束，不能很好地保持原圖的語義信息等）。為了解決這些問題，作者對其具體做法進行總結如下：1、引入了一種能反映三維人臉模型和二維的人臉圖像之間點到點的關聯稠密關聯場，讓網路能夠在二維圖像的指導下學習到隱含的三維人臉信息。2、設計了一種全新的紋理扭曲（warping）過程，可以有效地把人臉紋理映射到圖像域，同時又可以最大程度地保持輸入的語義信息。3、提出了一種對抗殘差字典學習過程，從而可以在不依賴三維數據的情況下更有效地學習人臉紋理特徵。4、實驗表明，該方法不僅在定量和定性指標上明顯地超過了已有方法，並且把生成圖像的解析度提高了一倍。