解析AI中尖端CV技術，能否助VR社交衝刺殺手級應用

2016年VR如同過山車般的軌跡，使得VR行業一度風雨飄搖。2017年是VR行業沉下心來磨槍擦刀的一年，相比較之前的概念風，大浪淘沙留下來創業者們都期待在大眾消費的這一元年，拿出自己的答卷，而行業內外，都在圍觀「VR行業能否爆出殺手級應用」。

VR步入關鍵節點，VR社交如輕嗅的猛虎

騰訊互娛近期發布的VR報告所述，目前硬體在交互性、舒適性、交互方面都不盡人意，產業鏈出貨無法保障，但這一問題隨著供應鏈成熟和系統標準的統一在今年會逐漸解決。VR軟體應用仍在探索VR交互和表現形式，VR軟體商業生態尚未建立。VR是一場持久戰，積極探索新的玩法，構建技術壁壘，才能形成長期競爭優勢，追求爆款機遇。

基於目前VR消費市場不足，用戶粘性缺乏的實際現狀，VR應用布局目前並不適合對遊戲、分發平台、技術組件等進行過分投入。而社交平台易產生用戶粘性，能形成用戶聚集的優勢，小投入、長期積累用戶的模式是重點布局的方向建議，社交聚集效應可以統一整合其他各類服務，包括遊戲、視頻、音頻等，在前期缺乏內容的情況下，可以較好提供用戶可消耗內容。目前Facebook、Altspace、Vtime、BeanVR、Recroom、High Fidelity等海內外創業精英團隊已重點對VR社交平台進行了布局嘗試，並陸續都拿到了高額融資額。單本月，已獲得770萬美元巨額A輪融資的AI虛擬形象公司Oben，軟銀又宣布對其進行繼續認投，3月25日新上線VR社交平台EmbodyMe也因其真人化身系統引起一陣嘩然。目前VR社交處於沉澱與爆發的關鍵時間，再後期恐怕進入的市場門檻將越來越高。

參考：騰訊互娛VR技術白皮書

CV作為VR社交中的戰鬥機，將從本質上提升社交互動與逼真性

CV技術以3D掃描技術與面部識別、3D建模及渲染為主要內容生成VR技術，作為AI中圖形方向的精尖領域，是VR社交面向消費者互動場景最重要的一環。

VR3D掃描可以通過3D掃描技術高度還原玩家頭部甚至全身，量身打造真人化身，未來在在美顏卡通拍照、遊戲、社交虛擬ID、醫療上可應用性更高。也是未來AI在消費應用領域大規模應用的典型場景，想像一下一個擁有絕世容顏的SIRI在VR社交中陪你到老的浪漫感覺。

參考：騰訊互娛VR技術白皮書

Facial Animation，可以對錶情進行精細捕捉，對眼球、口型和下頜的動作細節進行跟蹤捕捉，通過深度學習生成表情動畫，為VR社交角色擬人化提供可能性，對於虛擬電影、直播得到廣泛應用。

參考：騰訊互娛VR技術白皮書

在虛擬化身中，通過3D Avatar形成真人虛擬形象，並且通過Facial Animation 形成表情動畫，從而形成VR社交所需的真人化身及互動形態，除了這種視覺上打造，虛擬VR社交中還會通過對SLAM、Eye tracking、haptic interaction、redirection等交互技術深度學習打造深度互動模式。

VR行業中真正的殺手級應用無疑是最吊人胃口的，除了技術的比拼，也有對用戶心智把握的賽跑。

虛擬真人化身領軍技術團隊

VR新秀大型多人在線社交遊戲《EmbodyMe化身》，通過上傳人臉照片合成虛擬環境內真人的化身角色，並且可以隨意對化身形象進行髮型、性別、衣服等進行變換，也可以藉助外設同步玩家舉手，點贊等動作。通過虛擬化身及動作捕捉，能夠實現玩家在虛擬空間中和好友跳舞、搭積木等簡單交互，適合初級玩家上手。

AI虛擬形象公司ObEN ，可以通過自拍照的識別建立用戶的虛擬形象，還可以不斷學慣用戶的聲音如說話、唱歌等，識別用戶表情和動作，通過了解用戶的行為和習慣，未來可以帶來更多逼真的社交和虛擬互動，比起複雜的深度攝像頭，這項技術更有可能在消費級應用推廣。憑藉三維圖像重建技術，OBEN去年宣布完成了 770 萬美元的 A 輪融資，今年3月，軟銀韓國風險投資公司宣布完成對人工智慧公司ObEN的投資。

Bellus3D面部掃描相機，可以檢測到臉的三維500K點和捕捉面部細節，在短時間內創建出一個細緻到皮膚毛孔和皺紋的虛擬面部模型。用戶只需要把 相機插接到手機上，從左到右緩慢轉動頭部，兩個紅外光投影儀發出激光光束掃描用戶面部創建出精細的人臉面孔3D模型。Bellus3D 面部掃描照相機和 SDK 將於 2017 年第一季度提供給指定的開發者和合作夥伴，開發者可以開發用於 3D 虛擬化妝、自定義的 VR 遊戲角色、虛擬試穿(眼鏡或者假髮等)、醫學整形等領域的應用。

VR社交軟體應用BeanVR，主打VR/MR社交互動應用。在角色化身創建中，通過普通攝像頭對人臉掃描進行三維重建，形成真人虛擬化身，並且在三維建模完成後，利用人臉特徵點識別、神經網路技術、特徵對象特徵點識別與tracking等實現低延遲的表情同步。真人化身及表情同步對，可以與VR社區中實現同步、高度擬真、高度互動感。

High Fidelity在虛擬空間中創造阿凡達（化身），每個人的化身都能夠反映真身的面部表情。更值得興奮的是，3月末，VR角色設計公司Limitless 與 High Fidelity 達成合作，免費向High Fidelity的用戶提供基本設計功能，玩家可以將自己喜歡的VR場景、角色自助實現，進行交互，相比較其他需要豐富工程知識的智能平台，這個合作是VR設計平民化的大進展，也將使得VR社交離平民的娛樂、生活更近。

典型眼球追蹤VR交互產品

來自德國的技術公司SMI的研發系統「Social Eye」，通過一系列硬體和軟體的運作，可以在VR頭顯中捕捉到用戶的眼球移動，並且在VR世界中的虛擬化身身上再現。

FOVE於2017年初公布了兩款眼球追蹤VR應用，一款可以讓玩家感受到眼球追蹤與虛擬世界休閑應用，另外一款是基於眼球追蹤的數據分析應用，實現追蹤、匯總和分析用戶在虛擬現實體驗中的行為。玩家在虛擬商店中自由行走，應用會根據用戶注視的對象分析並按指定順序列出相關的統計數據。

在虛擬世界中，體驗者會將虛擬真人化身視為自己真正的身體，並通過它感知虛擬世界中的物，並且打破現實中的限制，實現自己更多想要的體驗和互動。當視覺信息、觸覺信息，與動作信息同步時人們會產生一種完全可信的「感覺」，從而增強虛擬社交的意願和樂趣。

MR互動成像趨勢技術

相比VR，AR領域的爭奪戰，MR相對就更加充滿想像，MR成像運用以微軟Hololens為代表，2016年BeanVR也推出了MR互動直播的虛擬演播模式。MR即混合現實，微軟的Holoportation將全息技術和混合現實技術進行組合，，對真人用戶的掃描成像記錄，在虛擬社交場景中以3D影像的形式進行實時「投影」，用戶可以通過微軟HoloLens頭顯，甚至是HTC Vive頭顯看到3D人物，進行聊天、交流。

BeanVR以MR成像技術為核心角色技術方案，為了和CV技術的結合，與微軟的Holoportation形態相似，通過全息技術和混合現實技術的組合高度還原完成的虛擬化身，但是採用了低成本的雙目攝像部件進行體態掃描，這樣不會產生太大的數據處理量，在保證圖畫質量的基礎上，實現遠程低延遲傳輸。基於這種成像技術運用，BeanVR也推出了MR互動直播演藝模式，實現實景演繹主播與虛擬用戶的互動化。

Holobeam實現在Hololens上全息3D聊天

BeanVR實現MR成像技術

VR普及的痛點在逐漸改善，VR社交成為人們生活娛樂的陣地並非空想

目前虛擬現實無法成為用戶的強需求，主要原因在於：無法在使用中獲得交流、沉浸狀態中無法進行其他交互，體驗孤獨而單調。

參考：易觀2016中國虛擬現實行業白皮書

今年硬體廠商紛紛入局，優質的硬體內容不斷增多，體驗不斷優化的同時，價格也更加親民，如oculus，Hyper, 大朋等紛紛下調硬體價格，特別是隨著Daydream, GearVR以及手機廠商的高調入局，玩家獲取優質體驗VR設備的成本越來越低，對VR的陌生感也日益消失，為了獲得更加優質的用戶體驗對於2000元以下好的VR設備有很強的購買慾。

參考：易觀2016中國虛擬現實行業白皮書

CV技術+語音識別+VR社交，將是未來AI滲透到消費者端並提供優質體驗與服務的關鍵助推技術，CV技術在虛擬環境中通過面部信息掃描、面部表情及動作的同步捕捉與追蹤，實現真人化身DIY化，並且通過VR的虛擬特性進行趣味化、豐富化，逐漸打破現實與虛擬的「隔閡」，以其代入式的場景和逼真的角色互動、道具交互，將其應用至教育、遊戲、娛樂綜藝、廣告、交友等不同虛擬場景，打造VR社交的互動化、生活化，VR走入人們日常生活，甚至成為剛需並不是空想。

【913VR原創內容，轉載請註明及回鏈】