【DOTA之后新里程碑】DeepMind强化学习重大突破:AI在多人射击游(16)

【DOTA之后新里程碑】DeepMind强化学习重大突破:AI在多人射击游

训练期间我们的智能体的表现。我们新的FTW智能体相比人类玩家和Self-play + RS和Self-play的基线方法获得了更高的Elo等级分——获胜的概率也更高。



除了性能评估之外,理解这些智能体的行为和内部表示的复杂性是很重要的。



为了理解智能体如何表示游戏状态,我们研究了在平面上绘制的智能体的神经网络的激活模式。下图中的点表示游戏过程中的情况,近处的点表示类似的激活模式。这些点是根据高级CTF游戏状态进行着色的,在这些状态中智能体要问自己:智能体在哪个房间?旗子的状态是怎样的?可以看到哪些队友和敌手?我们观察到相同颜色的集群,表明智能体以类似的方式表示类似的高级游戏状态。