作弊玩游戏,AI也学坏了?

多年以前,当我第一次见识到朋友们是如何在《超级马里奥》中通过卡一个龟壳无限刷分,在《魂斗罗》中用一种奇怪的方式获得额外生命的时候,拯救世界和公主就再也不是我想做的事了。

在我看来,游戏里发掘各种奇怪的Bug明显比拯救公主更有趣。

在《恶魔城:月下》里研究各种各样的出城Bug一直是我乐此不疲的一件事

但是现在,关于“利用Bug快速完成游戏目标”这件事情上,AI似乎比我还要擅长。

今年四月,曾经开发出击败Dota2职业选手的OpenAI公司,举办了首届针对AI的强化学习竞赛。这个比赛的目标,旨在评估强化学习算法从以往经验中泛化的能力。这听起来很拗口,具体地说,就是让AI来玩单机游戏,而且玩的是NES平台上的《刺猬索尼克》(非官方)。

世嘉公司在多年前开发的初代索尼克游戏成了AI的实验对象

每个参赛团队需要让自己研发的AI在不同的训练关卡上运行,通过短时间的机器学习,让AI掌握这款游戏的规则和操作方法,并在游戏设计师重新设计的地图上迅速找到最优的通关策略。

OpenAI举办这次比赛的目的,是想验证这样一个观点:强化学习的强泛化性是通往通用人工智能的关键路径之一。举个例子,如果你在《CS:GO》中是一个百发百中的神枪手,那么其他的FPS游戏你可能也会很轻松的上手。但如果你把一个针对《CS:GO》训练的AI直接扔到《守望先锋》里,那么它估计会直接崩溃。

因此,参赛选手需要让AI自己学习游戏的策略和技巧,以便在陌生的地图上自己找到最优的通关方法。

不过这一次,AI们好像聪明过了头。

在研究人员的调试下,AI被告知要优先获得更高的分数(一般通过击杀敌人和拾取金环获得),同时在仅可能短的时间内到达终点。这样的条件导致了一个奇怪但有趣的结果:AI开始通过寻找游戏内的Bug来更好的完成目标。

就像上面演示的这样,AI控制的索尼克在游戏中找到了一些特殊的“捷径”来让自己更快的达成目标,这些捷径都是通过类似于“卡Bug”的方式实现的。

这样的方式大大出乎研究人员的意料。最开始,研究人员希望AI能通过所提供的人类玩家数据来模仿人类的操作和行为,最终完成游戏目标。

但通过机器学习的人工智能对游戏显然有自己的一套理解,除了在游戏中寻找能让自己快速通关的Bug以外,它们还会做许多在研究人员眼里匪夷所思的事情。

谷歌Deepmind AI项目的研究人员维多利亚·克拉科夫纳就搜集了大量像索尼克这样的例子。

比如在一个《海岸赛艇》的小游戏里,AI操纵的船只沉迷于利用Bug不断地撞击奖励目标以达到更高的分数,顺利到达终点这件事已经不在它的计划之内了。

另一个研究人员试图让AI玩一款经典的像素游戏《Q伯特》,同样,AI在游戏里找到了一个无限刷分的严重Bug并在时间结束之前达到了最高分。不仅如此,当它发现敌人会跟着Q伯特一起掉下悬崖后,AI甚至采取了自杀的方式来获得更高的分数。

就连《俄罗斯方块》这样的游戏,AI也能找到自己的另类玩法。由于每增加一个掉落的方块都会使AI的评分略微升高,所以它采取了完全错误的游戏方式——尽可能快的落下每一个方块并在快要Game Over时暂停游戏以确保自己不会输。

好像听上去还蛮智能的……

虽然在比赛的最后,使用特殊方法获得胜利的AI并没有得到研究人员的认可,但他们还是表示:

人工智能无意间找到了获取游戏胜利更好的方法,虽然暴露了目前人类对于机器学习仍无法完全控制的的缺陷,但也显露出了AI异于人类的创造性火花。正是这种创造性的潜力让Deepmind投入大量的资金来让人工智能学习像《星际争霸2》这样复杂的竞技游戏。

在2017年的暴雪嘉年华上,Deepmind宣布将让自己的AI尝试《星际争霸2》这样的游戏,虽然让它和世界顶尖选手交战还为时尚早,但在今年,暴雪表示它已经可以应对其他AI的前期速攻战术。

在《星际争霸》2中,有人曾经设计出一种名为 “悍马2000”的脚本,虽然它能凭借操作以极少的兵力战胜远多于自己部队(比如100条狗冲破坦克阵),但这是在后台读取游戏内部数据的结果,算是真正的作弊,而不是能够自己学习和进化的AI。

2年前,AlphaGo带给人类关于围棋的新理解,也许再过不久,AI也能用全新的战术体系来颠覆人类在星际争霸上的统治。

当然就算失败了,当一个专门找Bug的游戏测试员也是个不错的选择嘛。

热门相关:遮天   轮回乐园   异世医仙   异世医仙   异世医仙