微軟為HoloLens全息視頻提出二次投影技術，改善流式傳輸帶寬和質量

文章相關引用及參考：映維網

利用二次投影技術來減少發送流式視頻的數據帶寬

（映維網 2019年02月22日）如果有關注與VR相關的技術文章，你可能曾多次見過「二次投影（reprojection）」這個術語，如交錯二次投影或非同步二次投影。二次投影是為了解決VR遊戲的苛刻性能要求，旨在填補無法及時渲染的幀。比方說一款遊戲不能達到標準的90fps，這時交錯二次投影將「強迫」其降至45fps，並在這基礎下每隔一幀進行一次重新投影，從而實現90fps的幀率。作為交錯二次投影的升級版，非同步二次投影則是智能地插入一幀，從而有效減少畫面抖動並使得體驗更為流暢自然。

現根據微軟的一份最新專利，這家科技巨頭似乎有意為全息視頻採用類似的二次投影技術，以改善流式傳輸的帶寬/質量。

發明文件顯示，諸如HoloLens這樣的MR頭顯在視頻壓縮和傳輸實況視頻方面存在一定的挑戰，如帶寬。另外，一系列現有的視頻壓縮技術都依賴於這樣一個概念：連續視頻幀的大部分背景從一個視頻幀到下一個視頻幀時保持相對靜態，因此只有實際變化的像素需要傳輸。但對於頭戴式顯示器，頭部移動可導致圖像數據（包括背景）中更頻繁和更大幅度的變化，這降低了已知視頻壓縮技術的有效性。

因此，MR頭顯需要一種可以減少帶寬要求和/或提升解析度的技術，亦即微軟在名為「Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality（二次投影全息視頻以改善流式傳輸帶寬/質量）」的發明文件中所描述的技術。

具體來說，微軟描述的技術適用於具有攝像頭和深度感測器的全息設備。在將數據傳遞到計算P幀（或B幀）的視頻壓縮器之前，流式傳輸應用程序執行應用於先前幀的圖像扭曲3D變換。系統將利用camera的已知3D位置和camera前面的3D幾何形狀，並基於camera的當前位置重新投影前一幀，而不是花費時間和資源來完全重新渲染一幀，從而減少發送流式視頻的數據帶寬。

相關專利：Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality https://patent.yivian.com/2223.html

儘管這只是一份專利，但考慮到「Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality（二次投影全息視頻以改善流式傳輸帶寬/質量）」是於2017年1月提交，所以如果馬上就要在MWC大會亮相的HoloLens 2搭載了這項技術，我們將不會感到驚訝。

文章《微軟為HoloLens全息視頻提出二次投影技術，改善流式傳輸帶寬和質量》首發於映維網.

喜歡這篇文章嗎？立刻分享出去讓更多人知道吧！