當前位置:
首頁 > 科技 > DeepMind表示要給人工智慧增加想像力?我們來仔細看看吧

DeepMind表示要給人工智慧增加想像力?我們來仔細看看吧

至頂網軟體頻道消息:因擊敗世界頂尖圍棋選手而名聲大噪的谷歌人工智慧精品店——DeepMind以消滅人類在智力方面的優越感妄想而著稱,發現為其軟體代理注入想像力有助於它們更好地學習。

DeepMind表示要給人工智慧增加想像力?我們來仔細看看吧

本周發表的兩篇論文——《Imagination-Augmented Agents for Deep Reinforcement Learning》和《Learning model-based planning from scratch》(從頭開始基於模型的規劃)——總部在英國人工智慧業務的研究人員描述了通過想像力規劃提升深度強化學習的新奇技術。

強化學習是機器學習的一種形式。它包含了通過與特定環境進行交互而學習的軟體代理程序,通常通過反覆嘗試和犯錯。深度學習是一種機器的形式,涉及受到人類大腦啟發的演算法——被稱為神經網路。而這兩種技術可以一起使用。

可以使用包含軟體代理運行規則的模型來完成深層強化學習。例如,為了教會軟體如何玩視頻遊戲,研究人員可能希望提供一個包含遊戲信息的模型,這樣可以避免在學習過程中代價高昂的嘗試和犯錯。或者研究人員可能會選擇無模型的強化學習,期望軟體代理最終自己選擇遊戲。

每種方法都有自身的缺點,基於模型的方法缺少在模型中未捕獲的信息,而無需模型的方法需要大量數據集並且缺乏行為靈活性。DeepMind的工作嘗試融合這兩種方法的優點。

這些研究人員在他們的第一篇論文中解釋說:「對環境模型的結構和可能存在的缺陷沒有做出任何假設,我們的方法是以端對端的方式學習提取從模型模擬中收集的有用知識——特別不依賴於模擬的回報。」他們表示,「這樣就可以讓代理受益於基於模型的想像,而又不會陷入傳統基於模型方式的陷阱。」

他們正在描述的是能夠在行動之前思考的軟體。

死胡同

DeepMind的研究人員提出通過構建,評估和執行計劃來學習的軟體代理。它將試錯學習與模擬結合作為「飛行前」檢查的一種形式,以便評估最有希望的途徑,同時避免明顯的死胡同。

研究人員用Sokoban測試了他們的想像力代理,這是一個拼圖視頻遊戲,是1981年在日本創建的,其中包含了在倉庫里移動盒子以及飛船導航遊戲。

Sokoban允許玩家推盒子,但是不可以拉動盒子,這意味著可能會有一些動作會讓遊戲中的難題無法解決。因此,如果是人類玩家,遊戲就會建議他們在開始行動之前先制訂一個計劃。研究人員認為,因為DeepMind代理也能夠進行這樣的規劃,所以也非常適合這個遊戲。

想像代理設法解決了所提出的Sokoban中85%的關卡,而標準無模型代理則為只能完成60%。它的表現也超過了一個拷貝模型代理,這是一個不使用有想像規劃增強版的標準代理。

研究人員在一篇博客中解釋說:「對於這兩個任務來說,想像增強代理在很大程度上勝過無想像的基準:它們以較少的經驗學習,能夠處理環境建模的缺陷。」他們表示,「因為代理能夠從內部模擬中提取更多的知識,和傳統的搜索方法——例如蒙特卡洛樹搜索——相比,它們能夠使用更少的想像,完成更多的任務。」

在行動之前思考讓機器學習工作變得更慢,但研究人員認為:「這在不可逆轉的領域至關重要,在這些環境中某些行動可能會產生災難性的後果,例如Sokoban。」

喜歡這篇文章嗎?立刻分享出去讓更多人知道吧!

本站內容充實豐富,博大精深,小編精選每日熱門資訊,隨時更新,點擊「搶先收到最新資訊」瀏覽吧!


請您繼續閱讀更多來自 ZD至頂網 的精彩文章:

希捷老兄,這是什麼?3-bit消費級SSD?
演算法讓YouTube在谷歌的雲端變得更快
人工智慧回到ABC?
多用途數據主導「物聯網未來」的實施

TAG:ZD至頂網 |

您可能感興趣

只會用「surprise」表「驚訝」嗎?快來增加你的辭彙量丨BBC圖說英語
你的課Facebook群控如何幫我們增加曝光率
需求量逐年增加的newschool紋身,你會扎嗎?
iPhone Xs Max重量增加!將會是最重的iPhone!
iPhoneXs Max重量增加!將會是最重的iPhone!
DDoS攻擊正在增加還是減少?這要看你問誰了
為了增加收入 Windows已經打算這樣做了
Google Photos很快又會增加一系列的新功能
華為對安兔兔使用gpu turbo技術,跑分是否會增加?
Google Pixel 增加了一項 AI 功能,變得更加貼心了
谷歌確認將增加Android對可摺疊顯示器的支持
Google在Android的Find My Device上增加了室內定位功能
蘋果HomePod增加支持更多新功能和Siri語言
Apple Music for Android增加了對平板電腦體驗的支持
谷歌Chrome更新增加了對Daydream的支持
蘋果AirPods會增加患癌幾率?真相併不是這樣
增加沉浸感,Netflix想在看電影的時候加入手機震動功能!
Magic Leap最新Lumin OS增加了手掌追蹤、多人共享功能
Windows10增加提速功能,越來越穩定,網友:你可知道我們的苦?
新變故,如果iPhone售價增加兩千,你們買嗎?