NextVR的最新技術為VR視頻帶來了全新的逼真度
NextVR是一家專註於體育和娛樂內容的虛擬現實轉播的公司,該公司於本周在國際消費電子展(CES)上發布了最新的廣播技術。與新的、更強大、更高解析度的虛擬現實頭盔並行,對NextVR技術的改進,為VR視頻內容帶來了新的質量和容量的新水平。
在高端VR用戶中,對360視頻內容的態度通常是相當糟糕的。因為360視頻很容易在廉價的硬體上捕捉到,所以有大量的低功耗的內容被捕獲和/或製作得很差。相對於高解析度、高幀率和高度交互的虛擬現實遊戲,許多高端耳機用戶都習慣了,360視頻內容常常被忽略,被認為是常見的高度壓縮、離線、非立體的混亂,似乎每次都出現。
另一方面,NextVR是少數幾家推動生產和播放質量限制的公司之一,目前正在接近一種質量和功能水平,可以被恰當地稱為「VR視頻」,而不是普通的「360視頻」。現在市場上有了更高解析度的耳機,該公司最新的管道改進將會讓高端耳機用戶看到VR視頻的真正潛力。
該公司最初成立於2009年,當時是一家為3DTV內容製作壓縮和直播技術的公司。該公司在3DTV市場急劇下滑後,轉向了NextVR,並在風險投資中籌集了超過1億美元的資金。
NextVR專註於從捕捉到廣播到觀看的整個管道,以及其間的任何地方。上個月,與聯合創始人大衛?科爾(David Cole)就該公司的最新發展進行了交談,很明顯,NextVR的作用遠不止於電影或視頻內容。科爾解釋了該公司如何構建自己的攝像設備,並建立了自己的壓縮、傳輸和回放技術,這使得NextVR在本質上不同於電影製作者在GoPro上拍攝的360視頻,並將其投放到YouTube上。
這是結束的方式,讓公司可以突破VR視頻質量的界限,而它的最新發展顯示了對一種媒體的巨大希望。
該公司推出的第一個重大改進是視頻質量的大幅提升,最終可以通過更高解析度的耳機(在被捆綁的類別中)實現,更強大的處理器能夠突破之前的解碼瓶頸(在移動領域)。
Cole說,在最好的情況下,有8mbps帶寬的情況下,公司現在可以每度流20個像素,比以前的8.5個像素高一些。記住,這也在立體聲和60幀。該公司計劃推出支持這種高解析度播放設備(我們只了解Windows虛擬現實耳機,開始)今年早些時候,但我必須看到一個預覽運行在三星的奧德賽VR耳機提供一個堅實的一步在像素計數在耳機的裂痕和萬歲vs 1440(1440×1600×1200)。
看了公司圖書館的體育內容,包括足球、籃球,甚至是怪物卡車的集會,我對改進後的質量印象深刻。高解析度不僅使細節更加清晰,而且還極大地增強了立體效果,因為更清晰的圖像創造了更清晰的邊緣,使立體深度更加明顯。
這種增強的立體效果在總體上看起來更好,但在更薄的細節上尤其引人注目,比如一個足球目標的網,它與後面的場景顯然是分開的。由於解析度不高,像網路這樣的薄細節有時似乎與後面的世界相吻合,而不是清晰地存在於它們自己的離散深度。
60個FPS的鏡頭看起來比從360個內容中看到的30個FPS鏡頭要流暢得多,而且它還允許一些相當緩慢的動作;我懷著敬畏的心情看著一輛巨大的怪物卡車撞在我前面的斜坡上,然後用慢動作做了一個完整的背部翻轉。在另一個場景中,一輛怪物卡車在我的近旁切下了一個急轉彎,在我的方向上發出了詳細的團塊和雲團。這是一個很好的例子,圖像質量,立體感,和慢動作,我真的感覺像有什麼東西飛向我。
除了提高質量,NextVR還在調整他們的管道進行容量捕獲和回放,允許查看者的視角在視頻中移動(而不是旋轉)。加入額外的維度對於沉浸感來說是巨大的,因為它意味著場景對你的動作做出反應,看起來更自然。雖然VR視頻內容一般都是靜態的,但即使是你在「靜坐」時所做的小動作,也必須在你的視圖中體現出來,以保持高沉浸感。因此,雖然NextVR的容量解決方案不會允許你在不破壞場景的情況下在房間里走動,但它仍然會對坐著的內容產生很大的影響。
NextVR的聯合創始人大衛?科爾(David Cole)告訴我,該公司的捕獲和回放方式非常適合於不使用延遲的容量播放,因為它們的一個關鍵價值主張是虛擬現實內容的直播。
因為公司使用立體正交投影,科爾解釋說,在現場的像素預計3 d網格和傳輸到主機設備,新幀所需的位置跟蹤在本地生成並顯示在耳機的刷新率(意義,就像轉動跟蹤,即使鏡頭60 FPS,你會看到90 hz跟蹤90 hz耳機)。基本上每個傳輸幀具有內置的場景的形狀,當你移動你的頭看對象,揭示背後的東西你看不到,你不需要等待伺服器發送一個新的幀與耳機的更新位置(這將引入顯著延遲)。
我得到了一個機會,可以看到公司的容量回放。再一次戴上三星奧德賽耳機,我發現自己坐在日落時分的美麗海灘上,周圍是巨石和岩石,海浪拍打著我的腳。當我移動我的頭部時,我可以清楚地看到我周圍的場景在移動,通過移動,我可以看到岩石的側面,否則我將無法從靜態的角度看到。正如科爾所描述的那樣,它感覺是沒有延遲的(除了耳機的固有延遲)。
立體海灘場景是一個很好的技術演示,但是我沒有看到足夠多的容量內容來感受它如何處理更具挑戰性的場景,比如那些有更接近和/或更快移動的物體的場景。由於近場物體會產生大量的「體積陰影」(由於遮擋導致相機無法捕捉的空白區域),所以容量捕獲很可能僅限於特定的、合適的產品。
該公司表示,將從今年開始推出容量瀏覽,首先是按需播放內容,其次是直播。
隨著這些更新,以及更好的耳機,NextVR似乎正朝著移動用戶的方向發展,正如科爾所說,「哇,看。」意思是:從新奇的新奇事物到普通的觀眾,這是3DTV從未超越的障礙。
從《魔獸世界》(wow to watch)中錯過的一個重要元素——我可能在多年的採訪中都提到了科爾——就是和朋友一起看內容的能力。現在,NextVR完全是一個單獨的體驗;如果你在看足球、足球、拳擊、賽馬,或者其他任何事情,你都是獨自一人。
雖然還沒有準備好談論他們的社交觀,但科爾確實說公司有「非常大的計劃」,並開玩笑說他們計劃很快就開始談論這些計劃。
當我問及該公司對社會觀察功能有多重要時,科爾說他們不確定,但很有希望。他說:「我受到了VRChat的啟發。」
至於牽引,該公司此前只在移動VR頭盔上使用,但最終在2017年底推出了一些系帶耳機(PSVR和Windows VR)。科爾表示,PSVR用戶對NextVR內容的接受程度讓公司感到特別驚訝和鼓舞。他說,在整個平台上,該公司的下載量已經達到了65萬次,用戶的平均下載時間為18.2分鐘。
至於為什麼該公司還沒有發布應用程序的兩個主要的PC虛擬現實耳機(裂谷和萬歲),科爾說,有很多因素,並進一步,「我希望看到一個客戶從我們這裡至少在萬歲Pro,但是我們沒有正式宣布任何東西。」
※比特幣使GPU價格暴漲 進入VR門檻日益增高
※豐田將亞馬遜的Alexa納入豐田和雷克薩斯汽車系統
TAG:智鋒號 |