曠視推手機3D視覺解決方案安卓一秒變蘋果

科技 08-09

智東西(公眾號:zhidxcom)

文 | 軒窗

智東西8月9日消息，昨天，曠視科技推出了軟硬一體的移動端3D感知全棧解決方案，以「AI+3D」為核心，能夠為手機廠商提供包含演算法和模組的的3D視覺能力，目前曠視的合作夥伴包括華為、小米、高通、聯發科等。

(曠視科技雲事業部高級副總裁吳文昊)

從2017年起，在蘋果基於3D技術推出FaceID、Animoji以及各種AR應用後，安卓陣營的手機廠商們也紛紛開啟了基於移動終端開發3D應用的熱潮。國產手機廠商以華為、小米、OPPO、vivo為代表，率先在3D視覺研究上進行布局。不過有意思的是，在手機廠商熱鬧的競爭背後，他們卻都選擇與曠視進行合作。而據曠視科技雲事業部高級副總裁吳文昊表示，基於消費終端的業務也佔據了曠視營收的40-50%。

一、曠視推軟硬一體3D感知全棧解決方案

手機3D視覺領域雖然已有多種類型的應用案例出來，但該領域包含演算法和模組的軟硬一體整體解決方案仍是缺位的。在此情景之下，曠視聯合了感測器、攝像頭、3D掃描技術等移動終端上的3D產業鏈各路玩家，推出了軟硬一體3D感知全棧解決方案。

在整套方案中，曠視擔任什麼角色？

曠視的研究體系主要有四個部分：框架式研發、核心演算法、基礎數據架構、深度學習自研引擎。針對不同的體系架構，曠視都有自己設計和優化的模型，並將每一個部分形成了方案模塊。在獲得了用戶的需求後，這些模塊可以快速進行組合，吳文昊也將其稱為曠視的核心競爭力。

曠視科技目前基於AI和IoT技術，將業務分為三大塊：消費終端、城市管理、商業運營。在智能終端上曠視主要有3個大方向：識別與感知、計算攝影、3D。目前應用方向主要在手機、汽車等領域。城市管理方面，曠視與公安部、支付寶等合作。在商業運營方面，主要是零售和物流行業，曠視與阿里巴巴、心怡科技物流都在合作。

在整套方案中，曠視將專註於識別和重建兩個大類。在識別方面上，曠視將基於自研的MegBrain深度學習引擎，在人臉識別、人體識別、活體檢測、注意力檢測追蹤及其他圖像識別等方面進行能力構建。重建則是指對識別出的物體進行三維重建，目前，曠視在人像3D建模、人體3D建模及物體幾何測量演算法上進行豐富的研究。

針對不同的應用場景，曠視和合作夥伴將根據深度計算、深度修復、深度優化、標定、畸變校正等需求，設計出基於雙攝、三攝、深攝的解決方案，在整合結構光、TOF、雙目等不同的攝像、感測系統架構上也進行了相關探索。

二、曠視的3D產業合作夥伴

在曠視發布的軟硬一體移動端智能3D產品解決方案中，最上面一層是3D應用層，往下依次至AI演算法、解決方案，最後到攝像、感測等硬體設備製造商。

在終端設備上，曠視與華為、小米、OPPO、vivo等早就建立了合作關係。此外，曠視還將聯合高通、聯發科等主要晶元廠商合作研發演算法適配性更強的晶元，進一步優化手機3D應用能力。

在移動端3D產業鏈最下面一層是硬體製造，包含攝像頭、感測器、晶元等硬體模組的研發。結構光、TOF和雙目方案涉及到高清攝像頭、IR投射器、IR接收器、激光發光器等設備的搭配組合，曠視目前已經與艾邁斯（ams）半導體等3D硬體模組廠商展開合作。

在3D應用層面，曠視目前與做3D人臉掃描的Bellus 3D、做光場重建的疊鏡科技、全球最大的無人機實景三維平台Altizure（珠科創新）等企業都建立了合作關係。

在會後的採訪中，當智東西問到曠視在選擇合作夥伴時有哪些標準？吳文昊回答說：「更看重合作夥伴的技術，我們希望給客戶提供最好的方案」。

三、安卓陣營構建3D產業生態的挑戰

相比於蘋果封閉的研發體系，安卓陣營的廠商較為獨立，這也給移動3D產業的發展帶來了碎片化等問題。最有趣的是，軟體廠商指責硬體不能滿足需求，而硬體廠商指責軟體廠商沒有好的應用支持。

對此，吳文昊也講起了曠視遇到的一個實際例子，去年曠視接手是vivo TOF項目的時候，遇到的最大挑戰就是由於供應鏈非常複雜，在討論方案的時候，屋子裡擠著10多家企業。同時，面對的又是一個非常新的問題，各家都缺少主心骨，非常辛苦。正是在這種情況下，曠視決心做一個更高效解決方案。

儘管公眾對VR/AR的熱度有所減退，但近兩年來3D產業卻在手機上獲得了新的生長土壤。有數據顯示，2017年的3D市場達到了0.7億，而且基本被蘋果獨佔，今年在安卓市場崛起的情況下，市場份額預測可達3億5千萬。所以說，在安卓陣營里，3D產業的市場規模是非常龐大的。

不過，儘管3D產業有著龐大的市場，但落地方式還需要不斷開發，而這要由應用場景和應用需求進行反推，同時，將移動3D產業供應鏈和生態鏈跑通也是構建3D產業生態的一個重要挑戰。

(Bellus 3D的聯合創始人兼CEO Eric Chen)

如果說是以應用驅動產業發展，那麼好的應用的產生將非常重要。Bellus 3D的聯合創始人兼CEO Eric Chen，曾是蘋果Quicktime VR項目的創建者之一，在 3D掃描領域有30年的經驗。在今天的研討會上，他表示，基於手機前置攝像頭的3D技術將會在未來三年內快速成長，而後置攝像頭由於離物體距離較遠，在技術上還有一定的挑戰。同時，他也認為終端上的3D應用要想保持上升式增長，不能只靠解鎖這一個單一定義，還需要給用戶到來更多的新鮮感，這就有賴於應用開發者的共同努力。