DOTA2人機決戰:2:0!OpenAI擊敗世界冠軍OG
整理 | 一一
出品 | AI科技大本營(ID:rgznai100)
今天凌晨 6 點,OpenAI Five Finals 決戰紫禁之巔一戰,OpenAI Five 第一次戰勝世界冠軍 OG,比分為2:0。
這場比賽多少還有些人對人類戰勝 AI 存有信念,因為OG 團隊的 5 位頂級 Dota 2 職業選手是去年 TI8 的冠軍,而 OpenAI Five 則在去年 8 月的兩場表演賽中連續兩場輸給了實力一般的人類玩家。
但你們顯然小瞧了 OpenAI Five 系統的迭代能力。
根據 OpenAI 聯合創始人 Greg Brockman 的說法,這次的 OpenAI Five 是在加速的虛擬環境中進行不斷更新的,「OpenAI Five 由深度強化學習提供支持,這意味著我們沒有對其進行編程」。
那這次 OpenAI Five 系統究竟強在哪裡?Brockman 解釋,在其存在的 10 個月中,它已經玩了相當於 45000 年的 Dota2 比賽。這讓它能輕鬆駕馭戰略決策,並以驚人的判斷力發揮其優勢,讓其看起來勢不可擋。
Dota2 是一款極其複雜的戰略遊戲,涉及 115 個角色和深層技能樹等,因此,OpenAI 在 AI 系統中比賽時會進行一定的限制,使得兩隊對戰時有 17 個英雄可供選擇。OpenAI 還選擇了所謂的「Captain"s Draft」的遊戲模式,該模式使得每個團隊戰略性地禁止英雄,以防止另一團隊在使用不同的挑選順序前選擇這些英雄角色。
這讓隊長在英雄組合中建立了優勢,並且一旦團隊開始逐一填寫名單,就可以利用敵方英雄的弱點。與之前的比賽一樣,OpenAI 也禁用了召喚和幻覺功能,這兩項功能都涉及以英雄副本的形式引入其他變數。除此之外,遊戲就像正常的 Dota2 比賽一樣,其最終目標是摧毀敵方隊伍的大型塔樓等目標。
在第一場比賽中,OpenAI Five 的表現讓 OG 大吃一驚,它通過一系列激進戰術來獲得勝利,其中包括決定花了在遊戲中賺取的錢,以便在死亡甚至在比賽的早期立即讓英雄復活。
Greg Brockman 指出,OpenAI 喜歡有利於短期收益的戰略,這揭示了其掌握人類擅長長期規劃並且通常依賴於贏得此類戰略競賽的缺陷。無論如何,在這局比賽中,OpenAI Five 利用這一點建立了優勢,當比賽拖到 30 分鐘時,OG 團隊看上去無能為力了。
第二場比賽,OpenAI Five 發揮得更好,在最初的幾分鐘內便對 OG 團隊建立了優勢,然後無情地打擊了後者,最終僅用了打第一場比賽時的一半時間拿下了比賽。對於這句比賽,有網友稱OpenAI Five 開始玩的異常激進,而 OG 在地圖上進行抵禦時暴露了其對策的弱點。
「好難過,我們註定失敗,「OG 團隊成員 Johan Sundstein 在輸掉第二局後在Twitter說道,「一旦他們(AI)統治這個星球,希望他們(AI)能夠記住,我們曾經多麼善良有禮。」
從對戰 DOTA 業餘玩家到能夠擊敗世界冠軍,達到這一成就,從 OpenAI Five 面世到今只用了三年左右的時間。
2016 年,當 OpenAI 宣布他們要教一台計算機玩 DOTA 時,該公司更多認為他們可以在自動駕駛和翻譯等棘手問題上取得進展,但出乎意料的是,AI 系統居然能與人類頂級玩家玩複雜的戰略遊戲,並且戰勝人類。
2017 年,OpenAI 在 DOTA 的 1v1 比賽中戰勝了職業玩家 Dendi。
2018 年 7 月,進階版 OpenAI Five 系統戰勝人類業餘玩家,2018 年 8 月,它又以 2:1 的戰績再次完成對至少有 6000 天梯分的人類高級玩家進行「屠殺」。
不過,OpenAI 系統並非完美,在 2018 年國際錦標賽上,OpenAI Five 開始挑戰職業隊伍,兩次輸給人類職業玩家。
這三年來,AI正在戰略遊戲中以我們所想像不到的速度在更迭,就在今年 1 月,DeepMind 推出的 AlphaStar 在星際爭霸2遊戲中以 10:1 的成績完虐人類,今天 OpenAI FIve 能在 DOTA2 中戰勝人類,也可能並不會讓我們感到非常吃驚。
此次比賽過後,OpenAI 組織表示將不再公開舉辦類似比賽,他們現在致力於開發軟體,讓人類與 OpenAI Five 系統進行實時協作,讓人類玩家與機器人一起玩遊戲,學習 AI 系統獨特的戰略和行為。OpenAI 還發布了一個平台,是供公眾試玩的 OpenAI Five 競技場模式 ,將於4月18日起開放三天。
OpenAI 表示,AI 系統協作軟體可能永遠不會向公眾開放,但此類研究明顯能讓 AI 系統對人類社會未來的發展帶來巨大的好處,比如 OpenAI 可能也會嘗試將其 AI 系統用於視頻遊戲環境,當然,更重要的是將其 AI 技術應用於現實環境。同時,OpenAI 認為,他們正在揭開通往 AGI 道路的秘密。
※救救中國996程序員!Python之父伸張正義,GitHub近23萬Star
※BERT拿下最佳長論文獎!NAACL 2019最佳論文獎公布
TAG:AI科技大本營 |