當前位置:
首頁 > 新聞 > 眾趣科技高翔:90分鐘實體場景三維重建,給你一個可漫步的3D空間

眾趣科技高翔:90分鐘實體場景三維重建,給你一個可漫步的3D空間

VR和AR的出現打破了真實與虛擬的界限,人們不僅希望能夠體驗電腦模擬的奇幻虛擬場景,也希望足不出戶就能領略世界各地的美景,希望能一個小時就能看完上百套出租房源。由此,如何能快速、低成本、大批量對真實場景進行三維重建,使真實場景也能成為虛擬的線上內容成為熱門話題。

眾趣科技高翔:90分鐘實體場景三維重建,給你一個可漫步的3D空間

專註於大空間三維重建的眾趣科技帶來了新的進展。4月17日,眾趣科技A輪融資暨新品發布會在北京舉行。眾趣科技CEO高翔宣布完成2400萬元人民幣A輪融資,由華贏資本領投。同時,眾趣科技還在會上發布了一款消費級3D相機——「空間獵者 N500」。

眾趣科技高翔:90分鐘實體場景三維重建,給你一個可漫步的3D空間

據稱,利用這款相機,一名普通的房產經紀人在25分鐘內可以完成一套三居室的數據採集,雲端在接收到數據後,最快可於60分鐘內完成自動三維重建。從拍攝到完成一個100多平米房間的3D建模,只需90分鐘左右。最重要的點是,重建後的3D場景保留了空間深度和尺寸信息,也支持3D場景內的有限制移動,有很強的沉浸感。

3D已經是一個眾人皆知的概念。但是由於3D內容的創建成本高,現在互聯網上2D的信息仍然佔據主導位置。傳統的的三維空間建模所需時間和人力成本較高,往往一個十幾秒的三維數據要花幾萬。

眾趣的這一整套空間三維重建的方法改變了傳統2D的呈現方式,也降低了三維重建的成本,在租房、電商、旅遊等領域都能有廣泛的應用。雷鋒網在現場體驗了這款產品,同時也同高翔進行了深入的交流。

與iPhone X一脈相承的深度視覺技術

「空間獵者 N500」這款3D相機大概有3-4個普通單反相機的大小。眾趣科技稱這款相機定位為消費級,價格與中高端單反相機接近,目的就是要讓3D內容的製作變得同拍攝2D的照片一樣簡單。

空間獵者 N500可以一鍵啟動,無需設置任何參數,可以自動調節白平衡。在放置好相機後,相機會旋轉一圈,大概花費30秒,單點拍攝範圍在半徑0.4米-3米左右。例如一個100多平米的房間可能需要多次拍攝,每次拍攝的位置點間隔3米左右。

拍攝完成以後,用戶需要將內容上傳至雲端,由眾趣科技團隊工程師對拍攝的3D內容進行演算法處理,重建出完整的3D場景再返回給用戶,這個時間在幾個小時不等。眾趣科技也推出了後期編輯App,界面與PPT類似,用戶可以在重建好的3D場景中添加文字、圖片、進一步修飾美化等。

雷鋒網發現,電腦軟體建模的三維場景可以實現與現實幾乎一致的自由移動,你能走到場景內的所有位置。但是眾趣科技用空間獵者 N500拍攝並重建的3D場景是有限制的移動。在3D場景中,你可以看到地面上有間隔的小圓點,這些小圓點就是可以「走到」的點。

眾趣科技高翔:90分鐘實體場景三維重建,給你一個可漫步的3D空間

重建後的3D場景可以支持手機、電腦、平版等設備,同時也支持VR模式。在手機上看的時候,用手指拉動屏幕,可以模擬在空間里的走動,仔細觀察場景細節。在用VR頭顯觀看時,沉浸感和3D感更強,通過將視線中心點對準位置信息點可以實現移動。場景的變化同我們真實走動看到的環境變化一致,並不是直接跳轉到下一個景色,中間的場景沒有被忽略。

眾趣科技高翔:90分鐘實體場景三維重建,給你一個可漫步的3D空間

(發布會會場漫遊gif)

從體驗上來看,眾趣科技的方案目前很接近用戶的現實體驗。不同於全景視頻只能從一個點「跳」到下一個點,眾趣科技的三維場景能夠讓用戶在裡面漫步,移動體驗幾乎類似電腦三維建模的場景,只是還不能隨心所欲地移動。

高翔詳細解釋了空間獵者 N500的核心技術。

眾趣科技高翔:90分鐘實體場景三維重建,給你一個可漫步的3D空間

目前市面上的VR全景相機、3D VR相機一般是採用多個普通的攝像頭,拍攝完成後用演算法拼接出全景圖片/視頻。高翔解釋到,這些大多是偽3D的產品,雖然有兩眼視差帶來的3D感,但是它是沒有三維數據的,是感受上的三維,技術上的二維。其實現的3D場景不能支持移動,也沒有空間的幾何尺寸。眾趣科技的三維重建有空間的三維數據,因此不僅看起來是3D,你還能獲得空間的三維信息,有真是的尺寸大小數據,你還可以在重建的房租里去擺放傢具,擺放效果跟實際的尺寸大小是一樣的。

眾趣科技產品包括硬體設備、雲端的拼接演算法、模型的雲服務,以及瀏覽器端的播放器四個部分。硬體部分,空間獵者 N500有傳統的用來採取色彩數據魚眼鏡頭、RGB鏡頭,同時還有用來採取空間三維數據的紅外發射器、紅外接收相機。其技術方案與iPhone X原深度攝像頭系統類似,iPhone X小劉海部分也包含了一個紅外散斑發射器,還有一個紅外相機。

iPhone X的原深度攝像頭能夠對人臉進行精確的三維建模,實現人臉識別,同時還能在三維的人臉上添加動態AR貼紙。這一個小小的攝像頭無疑讓人驚嘆。其實,其技術來源於微軟體感遊戲機Kinect,Kinect可以說是深度視覺技術的鼻祖,Kinect通過其深度相機和深度感測器能實現對空間的三維感知。此後,谷歌、蘋果都開始研發這項技術。手機AR的開創者谷歌Tango項目也是採用的Kinect的深度視覺技術,Tango手機都有深度攝像頭用來感知三維環境數據,然後再把AR內容放置在三維環境中。而微軟將Kinect的技術應用在了HoloLens上,HoloLens利用深度攝像頭提取部分環境數據,然後將AR內容融合在環境里,達到混合現實的效果。

眾趣科技高翔:90分鐘實體場景三維重建,給你一個可漫步的3D空間

(谷歌Tango)

此前,利用深度相機來感知環境這一技術難以理解,微軟Kinect項目和谷歌Tango項目進展都並不順利,或許是AR的發展,才使得這個技術能受到廣泛關注。高翔介紹到,「15年我說深度相機,很多人都不動,但是17年,投資界的朋友們不僅知道深度相機,而且對這個數據的使用空間的認識也達到了非常高的程度。」

在拍攝完成後,用戶可以將內容上傳到雲端。眾趣科技自主研發了三維拼接演算法,結合三維視覺技術——3Dslam以及GPU演算法,可以把所有信息進行自動化拼接,形成三維空間。與傳統相機設備完成所有攝像過程不同,眾趣科技的相機只負責採集3D場景最重要的原始數據,包括彩色數據和深度數據(鏡頭到物體之間的距離),真正的拼接過程全部在雲端完成。高翔介紹,拼接演算法也是眾趣科技的核心技術。

租房、電商、旅遊行業應用

高翔表示:在經歷了一年多的商業化探索後,2018年,首先眾趣科技將繼續全力支持阿里巴巴造物神計劃;其次,深入房產、家裝、酒店、公寓等行業,提供能夠切實解決行業痛點的升級方案,擴大重點行業的應用規模;第三,開展海外業務,目前眾趣科技的產品已受到不少國外客戶的關注,並完成整套產品的英文化及國際網路加速。

隨著VR的火熱,各個行業對3D內容的需求劇增。2016年,阿里為了發展VR購物,開啟「造物神計劃」,聯合品牌和商家打造全球最大3D商品庫。京東也開啟「天工計劃」,並且舉辦3D建模大賽,尋求最高效、低成本的3D建模方式。

據高翔介紹,阿里的造物神計劃目前主要有兩塊:建立商品的3D建模、建立場景建模兩個部分,前者有數家公司提供解決方案,在後一方面,眾趣是目前唯一的技術提供方。

眾趣科技跟阿里合作的過程中,做了不少場景化電商的展示:阿里拍賣、平昌冬奧會、商品溯源。例如,他們拍攝了波爾多的一個酒庄,然後消費者掃描酒瓶二維碼就能看到酒的生產地。

在房產、家裝等行業,眾趣科技主要與自如、蛋殼公寓等租房品牌進行合作,建立房源的3D模型,方便租客看房。傳統的照片和全景圖難以展示一個房間的整體結構,戶型大小,3D展示能讓人就像是真的走進去看過一樣。能節省租房公司帶人看房的人力成本,也能節省消費者選房的時間和精力。

高翔談到,不同的行業客戶對於3D內容的要求會不一樣。前期,眾趣科技推出了一些共性解決方案,此後會針對不同的行業推出定製化的行業解決方案。他舉了一個例子,有一家工廠,客戶想把整個工廠用三維數據做出來,因為工廠經常會買一些大型設備,運到工廠後,發現有些空間太狹窄,過不去。傳統的數據測量太複雜,如果有了三維建模的數據,工廠就能先進行虛擬測試。

在談及在VR行業的應用時,高翔談到,眾趣科技做的事情能為VR提供內容,但是,他們的思路不會局限在VR。在他看來,目前,真正發展的是互聯網三維,VR和AR只是互聯網三維發展的一個局部的領域,互聯網三維數據的積累,是這個行業發展的核心。

目前眾趣已經積累了一萬多個空間的三維數據,總共加起來有100萬平米的空間三維數據。高翔希望眾趣科技能拿到互聯網三維的入場券。

在商業模式方面,眾趣科技並不單純依靠賣3D相機這個硬體產品,而是定位於三維數據服務公司,替不同的行業做更深入的行業定製化功能,以數據服務來獲取收入。眾趣科技近期會上線3D內容平台——SpaceQ,將會展示來自世界各地、有特色的3D空間。

小結

微軟、谷歌、蘋果都在探索深度視覺技術,期望能讓機器理解我們的空間信息,在獲取空間信息後,對現實做一些增強。

在VR方面,不少公司都在探索用3D相機、光場相機來實現支持6Dof運動的VR視頻,真正讓人們可以在虛擬的真實場景中實現無限制的運動,為遊戲、旅遊、賽事提供全新的內容。例如英特爾在探索用圍繞足球場一圈的攝像頭來拍攝足球賽事,完整復刻空間信息和球員信息,使得觀看者可以選擇任一球員的視角、沉浸式地觀看比賽,還可以從球場任一視角觀看整個賽事。谷歌前段時間也推出了新的光場相機和支持小範圍6Dof運動的視頻。

眾趣科技用深度視覺技術來獲取空間三維信息,重建出三維空間模型,去提供一個VR的場景,可以說是用AR的思路做了VR的事情,是技術和場景應用上的創新。

雷鋒網了解到,不同的方案在技術使用和場景上都有差異:場景是動態還是靜態、3D還是2D、360度全景還是180度、有無三維數據、能否支持運動、成本高低。

目前,眾趣科技能做到在三維環境中有限制的移動,而高翔表示,三維空間中的無限制移動是必然的發展趨勢,目前並非技術水平達不到,而是行業需求與成本的限制。

喜歡這篇文章嗎?立刻分享出去讓更多人知道吧!

本站內容充實豐富,博大精深,小編精選每日熱門資訊,隨時更新,點擊「搶先收到最新資訊」瀏覽吧!


請您繼續閱讀更多來自 雷鋒網 的精彩文章:

谷歌拆分搜索和人工智慧部門;亞馬遜遭特朗普炮轟;傳蘋果正開發 Mac 定製晶元
用區塊鏈變革教育行業?全球首個教育+旅行+區塊鏈平台——Ambertime:讓每個人都能夠將時間凝結成自己專屬的「琥珀」

TAG:雷鋒網 |