过去两年时间里，索尼一直在通过由 1000 台 PlayStation 4 游戏机组建的虚拟训练场，对名为“GT Sophy”的人工智能开展培训。在去年 7 月的一场单车比赛中，其已能够超越真人玩家。然后 10 月份的时候，它甚至在虚拟赛车比赛中将人类挑落马下。

索尼官方旗舰店

游戏截图

测试项目选择了 Polyphony Digital 开发的《GT 赛车》（Gran Turismo Sport），这是一款画面真实、热度相当之高的 PlayStation 独占游戏。

而在最新实验中，索尼希望证明人工 AI 可在国际象棋 / 围棋之外的赛事中也碾压真人选手，即使这些游戏被长期认为是由人类主导的。

有趣的是，AI 还曾在经典的雅达利视频游戏和《星际争霸》即时战略（RTS）游戏中击败了人类选手。

当今的人工智能，通常特指基于神经网络技术的计算机编程过程。该技术旨在模仿人脑的工作方式，而索尼的最新研究成果，已发表在周三出版的《自然》杂志上。

对于《GT 赛车》之类的视频游戏来说，其最大的特色，就是提供了开放式的战术选择、以及模拟的物理规则。然而一位真人挑战者表示，GT Sophy 选择了新颖的路线来追赶他们。

Sony AI x Polyphony Digital Race Together - K.Yoshida Message（via）

在 SONY AI 油管频道分享的一段视频中，曾于 FIA《Gran Turismo 2020》世界总决赛中赢得三项挑战的 Takuma Miyazono 指出：

“人工智能在以一种我们永远想不到的方式去驾驶，但在回看的时候，它又显得相当合理”。

The Making of Gran Turismo Sophy - SONY AI（via）

据悉，GT Sophy 使用了一套被称作“深度强化学习”（deep reinforcement learning）的技术路线。

起初这套完全未经训练的系统并不知道它该干什么，但通过遵循人工设计的奖励机制，它最终掌握了比赛规则、然后一遍又一遍地掌控了比赛。

期间的难点，在于如何弄清赛车比赛中中的不成文规则，包括如何避免碰撞、以及适时地切断竞争对手的路线。

索尼 AI 总监 Peter Wurman 补充道：

我们普遍低估了彰显正确体育精神的难度，要做到这一点，我们必须不在竞争压力下面露难色、过于胆怯或咄咄逼人。

最后，为了运行这套模拟，索尼使用了 1000 台 PlayStation 4 游戏主机，并将之连接到了一台采用传统处理器的计算机上。

标签： 索尼研究团队《自然》杂志上发文解释如何训练