作弊玩遊戲，AI也學壞了？

AI的遊戲方式大大出乎研究人員的意料。

多年以前，當我第一次見識到朋友們是如何在《超級馬里奧》中通過卡一個龜殼無限刷分，在《魂斗羅》中用一種奇怪的方式獲得額外生命的時候，拯救世界和公主就再也不是我想做的事了。

在我看來，遊戲里發掘各種奇怪的Bug明顯比拯救公主更有趣。

在《惡魔城：月下》里研究各種各樣的出城Bug一直是我樂此不疲的一件事

但是現在，關於「利用Bug快速完成遊戲目標」這件事情上，AI似乎比我還要擅長。

今年四月，曾經開發出擊敗Dota2職業選手的OpenAI公司，舉辦了首屆針對AI的強化學習競賽。這個比賽的目標，旨在評估強化學習演算法從以往經驗中泛化的能力。這聽起來很拗口，具體地說，就是讓AI來玩單機遊戲，而且玩的是NES平台上的《刺蝟索尼克》。

世嘉公司在多年前開發的初代索尼克遊戲成了AI的實驗對象

每個參賽團隊需要讓自己研發的AI在不同的訓練關卡上運行，通過短時間的機器學習，讓AI掌握這款遊戲的規則和操作方法，並在遊戲設計師重新設計的地圖上迅速找到最優的通關策略。

OpenAI舉辦這次比賽的目的，是想驗證這樣一個觀點：強化學習的強泛化性是通往通用人工智慧的關鍵路徑之一。舉個例子，如果你在《CS：GO》中是一個百發百中的神槍手，那麼其他的FPS遊戲你可能也會很輕鬆的上手。但如果你把一個針對《CS：GO》訓練的AI直接扔到《守望先鋒》里，那麼它估計會直接崩潰。

因此，參賽選手需要讓AI自己學習遊戲的策略和技巧，以便在陌生的地圖上自己找到最優的通關方法。

不過這一次，AI們好像聰明過了頭。

在研究人員的調試下，AI被告知要優先獲得更高的分數（一般通過擊殺敵人和拾取金環獲得），同時在僅可能短的時間內到達終點。這樣的條件導致了一個奇怪但有趣的結果：AI開始通過尋找遊戲內的Bug來更好的完成目標。

就像上面演示的這樣，AI控制的索尼克在遊戲中找到了一些特殊的「捷徑」來讓自己更快的達成目標，這些捷徑都是通過類似於「卡Bug」的方式實現的。

這樣的方式大大出乎研究人員的意料。最開始，研究人員希望AI能通過所提供的人類玩家數據來模仿人類的操作和行為，最終完成遊戲目標。

但通過機器學習的人工智慧對遊戲顯然有自己的一套理解，除了在遊戲中尋找能讓自己快速通關的Bug以外，它們還會做許多在研究人員眼裡匪夷所思的事情。

谷歌Deepmind AI項目的研究人員維多利亞·克拉科夫納就搜集了大量像索尼克這樣的例子。

比如在一個《海岸賽艇》的小遊戲里，AI操縱的船隻沉迷於利用Bug不斷地撞擊獎勵目標以達到更高的分數，順利到達終點這件事已經不在它的計劃之內了。

另一個研究人員試圖讓AI玩一款經典的像素遊戲《Q伯特》，同樣，AI在遊戲里找到了一個無限刷分的嚴重Bug並在時間結束之前達到了最高分。不僅如此，當它發現敵人會跟著Q伯特一起掉下懸崖後，AI甚至採取了自殺的方式來獲得更高的分數。

播放

就連《俄羅斯方塊》這樣的遊戲，AI也能找到自己的另類玩法。由於每增加一個掉落的方塊都會使AI的評分略微升高，所以它採取了完全錯誤的遊戲方式——

儘可能快的落下每一個方塊並在快要Game Over時暫停遊戲以確保自己不會輸。

好像聽上去還蠻智能的……

雖然在比賽的最後，使用特殊方法獲得勝利的AI並沒有得到研究人員的認可，但他們還是表示：

「AI展示了它如何在沒有人類介入的情況下贏得遊戲勝利，出乎意料其富有創造性，可能會完全顛覆人類對遊戲如何運行的理解。」

人工智慧無意間找到了獲取遊戲勝利更好的方法，雖然暴露了目前人類對於機器學習仍無法完全控制的的缺陷，但也顯露出了AI異於人類的創造性火花。正是這種創造性的潛力讓Deepmind投入大量的資金來讓人工智慧學習像《星際爭霸2》這樣複雜的競技遊戲。

在2017年的暴雪嘉年華上，Deepmind宣布將讓自己的AI嘗試《星際爭霸2》這樣的遊戲，雖然讓它和世界頂尖選手交戰還為時尚早，但在今年，暴雪表示它已經可以應對其他AI的前期速攻戰術。

在《星際爭霸》2中，有人曾經設計出一種名為 「悍馬2000」的腳本，雖然它能憑藉操作以極少的兵力戰勝遠多於自己部隊（比如100條狗衝破坦克陣），

但這是在後台讀取遊戲內部數據的結果，算是真正的作弊，而不是能夠自己學習和進化的AI。

2年前，AlphaGo帶給人類關於圍棋的新理解，也許再過不久，AI也能用全新的戰術體系來顛覆人類在星際爭霸上的統治。

當然就算失敗了，當一個專門找Bug的遊戲測試員也是個不錯的選擇嘛。

投稿請發送至：

tougao@yystv.cn

發送

紅色

噓聲

暴雪嘉年華上的噓聲

爭霸

《魔獸爭霸3》的高清重製為什麼那麼受歡迎？

腦洞

德國的遊戲審查制度有多奇葩，開發商的腦洞就有多大

亂入

| 我堂堂刺客怎麼就亂入歷史節目了？遊戲同人圖讓各國媒體屢屢翻車

APP 

| 你還可以回復"APP"，獲取下載地址

喜歡這篇文章嗎？立刻分享出去讓更多人知道吧！