[外电] 研究人员利用GTA来训练自动驾驶人工智能
楼主: bearland (夜鹭食谷) 2016-09-16 12:03:48
欧美日各国都正在研发汽车自动驾驶科技，其中道路行车影像的辨识技术是个重要关键
。
为了开发道路行车影像辨识技术，需要开车上街，拍摄数以万计道路场景画面为基础，
来研发影像辨识的人工智能。开车上路拍摄要花好几千个小时，
之后还要再另外花费好几千个小时的人力时间，来辨识标记与分类拍摄到的道路场景画面
(image classification)，前后过程需耗费昂贵的金钱成本。
(图) AI人工智能眼中的道路行车画面
![]()
(source: MIT Technology Review)
根据美国MIT Technology Review的报导，加拿大卑诗省大学UBC研究人员的最新研究，
他们发现新型游戏的画面越来越逼真。为了节省成本，他们使用6万张游戏的道路街景
电脑合成画面(应该是GTA 5)，来训练AI人工智能的深层类神经网络和画面景深估测算法
(deep neural networks, depth estimation)，实验成果斐然。
另外，MIT报导中还提到一项由德国Darmstadt大学和Intel实验室合作的道路影像辨识
研究，研究人员发现GTA 5游戏中的场面画质相当逼真，于是他们利用GTA 5的电脑合成
画面来训练人工智能软件算法，用来辅助训练AI的道路影像辨识标记(semantic labels)
，实验成果也很不错。
AI人工智能经过2.5万张GTA 5道路影像画面的训练之后，只要再搭配原本的真实道路
影像其中1/3的资料量(CamVid training set)，新版AI的影像辨识性能会比原先
只靠完整真实道路影像庞大资料量训练的旧AI还要强。
用GTA 5来训练AI人工智能，省时省钱又更强。
(图) GTA 5道路行车的原始画面
![]()
(图) 经过AI人工智能辨识处理之后的GTA 5行车画面
![]()
(图表) 行车道路影像画面中,不同类型物体会用不同的颜色区分,也有不同的像素资料量
![]()
(图表) 五种AI人工智能训练法的成绩表
GTA 5搭配真实影像的训练法有最佳表现(real+synth)。
![]()
(source: tu-darmstadt.de https://is.gd/ZN8NrH )
[影片] 用人力手动的方式来帮GTA行车画面标记分类的过程实录，影片有缩时加快10倍
可看出过程很麻烦，费时费力。
https://vid.me/1PBy
====
自动驾驶技术还有很大的进步空间，GTA 5寓教于乐，贡献良多。
出处
[MIT] Self-Driving Cars Can Learn a Lot by Playing Grand Theft Auto
Hyper-realistic computer games may offer an efficient
https://is.gd/RFZfBx
Playing for Data: Ground Truth from Computer Games
https://is.gd/ZN8NrH
。
为了开发道路行车影像辨识技术，需要开车上街，拍摄数以万计道路场景画面为基础，
来研发影像辨识的人工智能。开车上路拍摄要花好几千个小时，
之后还要再另外花费好几千个小时的人力时间，来辨识标记与分类拍摄到的道路场景画面
(image classification)，前后过程需耗费昂贵的金钱成本。
(图) AI人工智能眼中的道路行车画面
(source: MIT Technology Review)根据美国MIT Technology Review的报导，加拿大卑诗省大学UBC研究人员的最新研究，
他们发现新型游戏的画面越来越逼真。为了节省成本，他们使用6万张游戏的道路街景
电脑合成画面(应该是GTA 5)，来训练AI人工智能的深层类神经网络和画面景深估测算法
(deep neural networks, depth estimation)，实验成果斐然。
另外，MIT报导中还提到一项由德国Darmstadt大学和Intel实验室合作的道路影像辨识
研究，研究人员发现GTA 5游戏中的场面画质相当逼真，于是他们利用GTA 5的电脑合成
画面来训练人工智能软件算法，用来辅助训练AI的道路影像辨识标记(semantic labels)
，实验成果也很不错。
AI人工智能经过2.5万张GTA 5道路影像画面的训练之后，只要再搭配原本的真实道路
影像其中1/3的资料量(CamVid training set)，新版AI的影像辨识性能会比原先
只靠完整真实道路影像庞大资料量训练的旧AI还要强。
用GTA 5来训练AI人工智能，省时省钱又更强。
(图) GTA 5道路行车的原始画面
(图) 经过AI人工智能辨识处理之后的GTA 5行车画面
(图表) 行车道路影像画面中,不同类型物体会用不同的颜色区分,也有不同的像素资料量
(图表) 五种AI人工智能训练法的成绩表
GTA 5搭配真实影像的训练法有最佳表现(real+synth)。
(source: tu-darmstadt.de https://is.gd/ZN8NrH )
[影片] 用人力手动的方式来帮GTA行车画面标记分类的过程实录，影片有缩时加快10倍
可看出过程很麻烦，费时费力。
https://vid.me/1PBy
====
自动驾驶技术还有很大的进步空间，GTA 5寓教于乐，贡献良多。
出处
[MIT] Self-Driving Cars Can Learn a Lot by Playing Grand Theft Auto
Hyper-realistic computer games may offer an efficient
https://is.gd/RFZfBx
Playing for Data: Ground Truth from Computer Games
https://is.gd/ZN8NrH
作者: ccc73123 2016-09-16 12:07:00
用GTA训练的话 AI会不会看到拿球棒的人就直接撞下去?
作者: Sunal (SSSSSSSSSSSSSSSSSSSSSSS) 2016-09-16 12:17:00
应该是只有训练图像辨识 没有训练驾驶逻辑
作者: faven1024 (FH) 2016-09-16 12:22:00
GTA5还满多三宝的
作者: PaulOneil1 (寻找新方向) 2016-09-16 12:44:00
自动撞警车系统?
作者: dixieland999 (迪西兰) 2016-09-16 12:46:00
为什么要人工标记分类道路场景...那不是AI要做的事?
作者: diebird5566 (不死鸟５６) 2016-09-16 12:48:00
可以抢太平洋吗
作者: endless0121 (囚鸟不要开招 开招时机?2) 2016-09-16 12:59:00
蛮有趣欸ㄜ
作者: Morphee (千磨万击还坚劲) 2016-09-16 13:07:00
因为是监督式学习
作者: sleepgod0602 2016-09-16 13:51:00
作者: supereva (eva) 2016-09-16 15:18:00
这游戏真的是传奇 可惜我没空好好玩他
作者: ralan009 (Alvin) 2016-09-17 06:04:00
这样完全是机器视觉方面靠影像处理如果是真实世界 可以借助雷达侦测 安全性更高
作者: Rocker5566 (摇滚56) 2016-09-17 09:22:00
大陆才又死一个 是有多懒需要用生命debug
作者: treeson (树桑) 2016-09-18 17:16:00
这样节省很多成本，毕竟一款游戏夏日大特卖只要3xusd