Facebook用限量感測器實現高質量全身動捕,帶來逼真虛擬角色交互
查看引用和消息源請點擊:映維網
研究成果演變成產品之前尚有一段很長的路要走
(映維網 2019年05月02日)F8大會的第二天專註於Facebook的長期投資:AI和AR/VR。在主題演講中,Facebook首席技術官邁克·斯科洛普夫(Mike Schroepfer)探討了公司用於解決旗下個產品挑戰的AI工具,並且解釋了他對AI未來感到樂觀的原因。然後,Facebook AI的Manohar Paluri和Joaquin Quinonero Candela,產品設計部門的Margaret Stewart,以及AR/VR團隊的Lade Obamehinti、Lindsay Young和Ronald Mallet都有上台發表演講。
Facebook正在將包容性AI流程用於增強現實。Spark AR工程師利用它來確保軟體能夠為所有人提供一致的AR效果質量。例如,一些效果是由手勢觸發,所以訓練數據納入了不同的膚色和不同的光照條件,從而確保系統能夠識別攝像頭前面的所有手勢。Oculus工程師則利用這個流程來支持虛擬現實中的語音命令,涵蓋不同方言、語音和性別的代表性數據。
Facebook表示:「我們致力於確保我們的技術不排除任何一人,我們同時致力於確保我們的技術能夠拉近你我的距離。隨著VR,我們認為這是未來,屆時無論物理距離如何,我們都能夠相聚在一起並彼此交互。但要真正做到這一點,用戶需要感到完全臨場於虛擬現實。這意味著我們需要逼真的虛擬化身,並通過不同的手勢,面部表情和語音語調來增加對話的真實感。」
Facebook已經演示過Codec Avatars的真實程度,這允許用戶在VR中進行實時交互。但真正的交流需要全副身心的投入。
所以,Facebook正在開發一個完全自適應的基物(基於物理)模型,利用有限數量的感測器數據來再現3D化身。這家公司使用分層方法複製人體解剖結構,並能自動適應任何個體的外觀和獨特運動。他們從內到外設計了所述的模型,開發虛擬骨架,然後肌肉成形,並且分層皮膚和衣服。結果是從肌肉運動到衣服皺褶都十分逼真的虛擬化身。
Facebook坦誠:「在研究成果演變成產品之前尚有一段很長的路要走,但迄今為止的結果令我們感到非常鼓舞。」
延伸閱讀:Facebook 50年征途:Codec Avatars,創造逼真虛擬角色
延伸閱讀:Facebook 50年征途:Oculus Avatars的起步、演變與未來
跟AR一樣,Facebook希望VR同樣具備包容性和安全性。為了營造一種彼此尊重的文化範圍和交流互動,這家公司構建了一套預防性系統,如針對頭顯使用或內容開發的行為準則。他們同時已經建立了相關的響應系統,包括用於報告或阻止違規行為的工具。
對於Facebook的社交VR應用,包括Spaces,Venues和Rooms,它們都在體驗的核心設計中納入了安全考量。這家公司同時提供了一個介紹視頻,向用戶解釋了旨在提高VR中交互舒適感的功能。例如,安全氣泡是一種可以防止對方過分靠近自己的功能。如果一位用戶進入另一個用戶的安全氣泡,則兩者彼此之間都不可見。Facebook同時任命了「版主」,他們將幫助確保社交空間的安全運行,並審查和報告不當行為。
※《油脂》導演克萊澤的VR科幻劇集《Defrost》登陸Pico、Oculus、小米VR等平台
※2019年04月24日美國專利局最新AR/VR專利報告
TAG:映維VR |