真實全景圖像強化學習 AI 平台——Matterport3DSimulator

Matterport3DSimulator 可以使用視覺信息（RGB-D 圖像）開發與真實 3D 環境交互的 AI Agent，它主要應用於深度強化學習的研究以及自然語言處理和機器人技術的結合技術。

請訪問官網（https://bringmeaspoon.org/）獲取最近的更新和 Demo。

這是早期發布的開發代碼，官方可能會做一些重大的改變，尤其是考慮與 ParlAI 和 OpenAI Gym 整合之後。

特徵

數據集由 90 個不同的室內環境組成（包括住宅、辦公室、酒店、教堂）

所有的圖像都是真實的，不是合成的（提供更多的視覺複雜度）

用於 C++ 和 Python 的 API

可定製的圖像解析度、相機參數等

支持使用 OpenGL 的 GPU 渲染，以及使用 OSMESA 的離屏（off-screen）CPU 渲染。

參考

Matterport3DSimulator 和 Room-to-Room (R2R) 導航數據集在下述的論文中有詳細描述：

https://arxiv.org/abs/1711.07280

如果你要使用模擬器或者數據集，請引用以下論文：

@article: Interpreting visually-grounded navigation instructions in real environments},

author=nderhauf and Ian Reid and Stephen Gould and Anton van den Hengel},

journal=,

year={2017}

}

喜歡這篇文章嗎？立刻分享出去讓更多人知道吧！