研究員為2D視頻移植AR 3D效果，用HoloLens看世界盃

支持觀眾將桌面或地面等平坦表面變成虛擬球場

（映維網 2018年06月13日）備受期待的世界盃將在本周開幕。儘管比賽毫無疑問會非常精彩，但我們大多數人都只能在平面電視機上觀看。不過，華盛頓大學的研究人員提出了一種增強現實替代方案。儘管可能無法趕在今年世界盃為大眾提供服務，但這預告了球迷在未來享受體育賽事的新方式。

研究人員開發了一種能夠將2D足球片段移植為3D重建內容的機器學習演算法，而觀眾可以利用微軟HoloLens等AR頭顯欣賞比賽。這種技術可以支持觀眾將桌面或地面等平坦表面變成虛擬球場，然後系統將渲染相應的3D內容，從而支持你從不同角度進行觀看。

這不能等同於在現場觀影賽事，但顯然比平面電視更加接近。而且更重要的是，這可比現場觀賽的成本更低。

項目的一位研究人員康斯坦丁諾斯·里馬塔斯（Konstantinos Rematas）表示：「我們的目標是提升體育賽事的觀影體驗。不再需要在平面2D屏幕上觀看足球比賽或球場，而是將原始視頻移植為3D，並在增強現實中將其視覺化出來。比賽從根本上變成了全息圖，而你可以四處走動並從不同的角度欣賞賽事，從而帶來更逼真的體驗。」

作為輸入，他們研發的演算法只需一段YouTube足球視頻。由於這無法提供沒有足夠的信息來訓練渲染系統將2D球員「升頻」為3D，所以研究人員通過神播放遊玩《FIFA 2018》遊戲的視頻來幫助神經網路估計深度。利用所有這一切信息，系統可以相對精確地判斷球員在球場上的位置。

目前項目仍在開發之中。例如，球沒有被正確地渲染（這對於足球比賽而言非常重要），而且球員仍然是2D裁剪。研究人員希望未來可以在這兩方面取得進步。

里馬塔斯繼續道：「接下來我們要提高比賽重建的質量。特別地，我們希望精確估計球的位置並且更好地重建球員，如遮擋，完整的3D形狀估計等等。」此外，研究人員計劃擴展至其他運動，如籃球，曲棍球和足球。

原文鏈接：https://yivian.com/news/46813.html

喜歡這篇文章嗎？立刻分享出去讓更多人知道吧！