※ [本文转录自 Gossiping 看板 #1Y29NieK ]
作者: andy199113 (诶嘿嘿嘿) 看板: Gossiping
标题: [新闻] 跑车浪漫旅玩家小心了！Sony开发最强赛车
时间: Sun Feb 13 13:23:53 2022
1.媒体来源: ithome
2.记者署名: 李建兴
3.完整新闻标题: 跑车浪漫旅玩家小心了！Sony开发最强赛车AI或将进入游戏惨电玩家
4.完整新闻内文:
Sony AI在Nature期刊发表最新的赛车人工智能研究，该组织所开发的GT Sophy人工智能
代理，能够在跑车浪漫旅赛车游戏中击败冠军玩家
Sony AI x Polyphony Digital Race Together - K.Yoshida Message
https://www.youtube.com/watch?v=QvTAAKI4x-4
The Making of Gran Turismo Sophy [English]
https://www.youtube.com/watch?v=l948hMaTPuo
Gran Turismo Sophy RACE TOGETHER 2021 #1 [English]
https://www.youtube.com/watch?v=4Gfm317R7l4
Gran Turismo Sophy RACE TOGETHER 2021 #2 [English]
https://www.youtube.com/watch?v=dxmIAy9ShZg
不只在西洋棋以及即时战略游戏Dota，人类玩家打不赢电脑，现在连赛车游戏也失守，
人工智能已经有能力在赛车游戏中跑赢顶尖车手。
由Sony AI、Polyphony Digital和Sony Interactive Entertainment共同合作，
所开发的人工智能代理Gran Turismo Sophy（GT Sophy），在知名赛车游戏跑车浪漫旅
（ran Turismo）游戏中，打败全世界最厉害的玩家赛车手，而Sony正探索将这个
人工智能代理整合到跑车浪漫旅系列作的方法，与玩家展开对决。
Sony AI研究人员在Nature期刊发表论文〈Outracing champion Gran Turismo
drivers with deep reinforcement learning〉，应用深度强化学习技术，开发出超越
跑车浪漫旅车冠军手的人工智能代理。这个研究以跑车浪漫旅系列作品，2017年
Polyphony Digital于家用游乐器PlayStation 4上所发布的Gran Turismo Sport（GT
Sport）版本为基础，该游戏逼真重现真实世界的赛车环境，由于GT Sport采用了最新
的车辆动力系统模拟，游戏中赛车的效能几乎与真实世界的赛车相同，对空气阻力、
轮胎摩擦，甚至悬吊系统移动所造成的方向改变都进行建模。
再加上拥有来自车厂的指导，GT Sport中赛车车身曲线、方向灯和大灯细节都
与实体车型相同，精确地重现车辆细节。游戏也设计了明确的规则和判断标准，
是一个与真实世界接近且公平的赛车游戏。
Sony AI在这个接近现实赛车的游戏中，开发赛车人工智能代理，其所使用的增强学习
是一种机器学习技术，训练人工智能代理在环境中，透过奖励和惩罚学习所要采取的
行动。Sony AI以增强学习为基础，发展了一种更先进的训练算法，称为QR-SAC
（Quantile-Regression Soft Actor-Critic）。
https://s4.itho.me/sites/default/files/images/rl-techniques.png
深度增强学习技术早已被用来开发各种游戏的人工智能代理，研究人员提到，增强学习
技术代理会考虑行为带来的长期影响，并且可以在学习期间自己收集资料，免去人工
编码行为规则的繁琐工作，因此很适合用来开发游戏人工智能代理，特别像是GT Sport
这类复杂的游戏。
QR-SAC算法训练人工智能代理GT Sophy，成为一个技术高超，有谋略又有礼貌的赛车
手，能够掌握赛车控制、战术还有礼仪技能。QR-SAC能够推理出GT Sophy在高速行动下
的结果，考虑到驾驶行为和后果，并在与不同类型的对手比赛时，考量复杂的可能性，
GT Sophy能够以高超的控制技巧，在一系列弯道组合，在未有接触下贴著赛道墙面行驶。
GT Sophy虽然能够自己收集资料，但训练像是尾流超车（Slipstream Passing）
这种特殊技巧，需要对手处与特定的位置。因此Sony AI还以混合情境训练GT Sophy，
除了手工制作每条赛道需要掌握的重点之外，也有协助代理人学习的专业陪练对手。
这些训练使得GT Sophy获得一些专业的赛车技术，包括处理赛车同时起步的拥挤情况，
或是利用前车尾流弹射超车，甚至是防守动作。Sony AI特别展示了GT Sophy能够精巧
控制方向盘，在急转弯中追赶前车。
除了有技巧之外，特别的是GT Sophy也具有赛车礼节，Sony AI研究人员找来书面和
不成文的赛车规则，并且将其编码成复杂的奖励函式，使得GT Sophy不过于激进或是
胆怯，能与人类展开具有竞争性的比赛。GT Sophy可以不阻挡其他车手，留给对手
足够机动空间的情况下超车。
Sony AI在自家开发的DART（Distributed, Asynchronous Rollouts and Training）
训练平台训练GT Sophy，DART平台具有大量的CPU和GPU，能够连接1,000多台
PlayStation 4，以收集训练GT Sophy的资料集，同时DART还可管理代理运算资源和
跨资料中心的GPU，研究团队会在DART上同时进行数百个实验，以探索提升GT Sophy
效能的技术。
5.完整新闻连结 (或短网址)需放媒体原始连结，不可用转载媒体连结:
https://www.ithome.com.tw/news/149302
6.备注:
看完AI跟真人玩家实战影片，技巧跟真人一样，甚至更好
AI好可怕，以后电竞选手死定了，AI玩游戏肯定第一名得冠军的吧!