谷歌放大招!最新VR體驗讓人更貼近真實
Google(谷歌)公司推出了一種新的虛擬現實(VR)沉浸式體驗,該體驗基於一種新穎的系統——使用光場技術捕捉和渲染來自現實世界的高質量逼真圖像。谷歌研究人員開發了「Welcometo Light Fields」(光場技術實驗平台),這是這家科技巨頭對光場VR體驗的又一探索。光場VR是VR視頻技術的一個令人興奮的新領域,因為它能提供極高質量的圖像和體驗。
谷歌今年早些時候發布了名為「Welcome to Light Fields」的免費應用,支持OculusRift,HTC Vive和WMR頭顯。谷歌將在SIGGRAPH大會新開設的單元ImmersivePavilion中演示這一VR體驗。ImmersivePavilion專為虛擬現實,增強現實和混合現實設計,包括面向遊戲內容的Vrcade;針對故事敘述的VR Theater,以及用於展示大型項目的Village。SIGGRAPH 2018大會將於8月12日至16日在不列顛哥倫比亞溫哥華舉行,這是一年一度的大會,世界領先的專業人士,學者和創意人才都會參加——這些人處於計算機圖形學和互動技術的最前沿。
「Welcome to Light Fields」將允許用戶前往NASA(美國國家航空航天局)的發現號太空梭,向觀眾提供飛行甲板內的視圖,該視圖從未向公眾開放;探索帕薩迪納蓋博住宅(GambleHouse)的亮漆柚木和紅木內飾;感受威尼斯馬賽克小屋(Mosaic Tile House)的光澤陶瓷;欣賞位於加利福尼亞州的格拉納達山聖斯蒂芬教堂那閃閃發光的彩色玻璃窗。
「喜歡VR中的光場能夠將你傳送至富有特色的真實世界場所,並且能讓你認為自己仿如身臨其境,」谷歌軟體工程師RyanOverbeck說,「對我來說,這很神奇。」
為了將這種體驗變為現實,Overbeck與一個團隊合作,包括谷歌的高級工程師PaulDebevec(項目負責人),谷歌工程師Xueming Yu,JayBusch和Graham Fyffe。Overbeck則與Daniel Erickson和Daniel Evangelakos專註於軟體終端。研究人員設計了一套完整的系統,用於從現實世界中捕獲和渲染高質量的球形光場靜止圖像。他們根據GoPro Hero4運動相機開發了兩款易於使用的光場攝像裝置,可有效捕捉球體表面上的數千張圖像。然後,他們通過基於雲端的光場處理管道來整合圖像。
除此之外,Overbeck解釋說:「處理管道使用計算機視覺將圖像放置在3D中並生成深度圖,我們使用vp9視頻編解碼器的修改版本來將光場數據壓縮到可管理的尺寸。」他指出,為了渲染光場數據集,團隊使用了一種可以實時混合數千張光場圖形的渲染演算法。
該團隊依靠谷歌在計算機視覺,圖形,視頻壓縮和機器學習方面的優秀工程師來克服光場技術的獨特挑戰。他們同時與WebM團隊(製作vp9視頻編解碼器)進行密切合作,開發出融入其系統的高質量光場壓縮格式;並充分利用了JumpVR團隊的專業知識來幫助構建圖像和生成深度地圖。(Jump是谷歌專業VR系統,用於大規模視頻製作。)
事實上,谷歌團隊通過「Welcome to Light Fields」演示了光場VR技術的潛能與前景,說明了這種技術能夠以無與倫比的真實感來實現真正身臨其境的體驗。儘管計算機圖形領域已經對光場技術研究和探索了30多年時間,但能夠真正提供高質量光場體驗的可行系統尚未成為現實。
團隊開發VR光場體驗的動機是為了鼓勵和啟發這一新興領域。
「Welcome to Light Fields證明了,現在有可能製造出運行在消費者硬體上的,引人入勝的光場VR瀏覽工具,而我們希望這可以鼓勵其他人參與開發光場技術和媒體內容,」Overbeck說道,「我們明白,為了最終開發出基於光場的消費者產品,我們需要一個蓬勃發展的光場技術生態系統。我們需要開放光場編解碼器,我們需要藝術家創造美麗的光場圖像,我們需要人們習慣於使用VR,並與光場產生聯繫。」
TAG:軍事模擬科技 |