研究人員利用GTA來訓練自動駕駛人工智慧 - 汽車

Todd Johnson avatar
By Todd Johnson
at 2016-09-16T12:03

Table of Contents

歐美日各國都正在研發汽車自動駕駛科技,其中道路行車影像的辨識技術是個重要關鍵


為了開發道路行車影像辨識技術,需要開車上街,拍攝數以萬計道路場景畫面為基礎,
來研發影像辨識的人工智慧。開車上路拍攝要花好幾千個小時,
之後還要再另外花費好幾千個小時的人力時間,來辨識標記與分類拍攝到的道路場景畫面
(image classification),前後過程需耗費昂貴的金錢成本。

(圖) AI人工智慧眼中的道路行車畫面
http://i.imgur.com/pZuDFDG.jpg (source: MIT Technology Review)


根據美國MIT Technology Review的報導,加拿大卑詩省大學UBC研究人員的最新研究,
他們發現新型遊戲的畫面越來越逼真。為了節省成本,他們使用6萬張遊戲的道路街景
電腦合成畫面(應該是GTA 5),來訓練AI人工智慧的深層類神經網路和畫面景深估測演算法
(deep neural networks, depth estimation),實驗成果斐然。

另外,MIT報導中還提到一項由德國Darmstadt大學和Intel實驗室合作的道路影像辨識
研究,研究人員發現GTA 5遊戲中的場面畫質相當逼真,於是他們利用GTA 5的電腦合成
畫面來訓練人工智慧軟體演算法,用來輔助訓練AI的道路影像辨識標記(semantic labels)
,實驗成果也很不錯。

AI人工智慧經過2.5萬張GTA 5道路影像畫面的訓練之後,只要再搭配原本的真實道路
影像其中1/3的資料量(CamVid training set),新版AI的影像辨識性能會比原先
只靠完整真實道路影像龐大資料量訓練的舊AI還要強。

用GTA 5來訓練AI人工智慧,省時省錢又更強。


(圖) GTA 5道路行車的原始畫面
http://i.imgur.com/TKN58tr.jpg

(圖) 經過AI人工智慧辨識處理之後的GTA 5行車畫面
http://i.imgur.com/FghUQIN.jpg

(圖表) 行車道路影像畫面中,不同類型物體會用不同的顏色區分,也有不同的像素資料量
http://i.imgur.com/ucByICh.jpg


(圖表) 五種AI人工智慧訓練法的成績表
GTA 5搭配真實影像的訓練法有最佳表現(real+synth)。
http://i.imgur.com/jJ1TdOS.jpg

(source: tu-darmstadt.de https://is.gd/ZN8NrH )


[影片] 用人力手動的方式來幫GTA行車畫面標記分類的過程實錄,影片有縮時加快10倍
可看出過程很麻煩,費時費力。
https://vid.me/1PBy

====
自動駕駛技術還有很大的進步空間,GTA 5寓教於樂,貢獻良多。


出處
[MIT] Self-Driving Cars Can Learn a Lot by Playing Grand Theft Auto
Hyper-realistic computer games may offer an efficient
https://is.gd/RFZfBx

Playing for Data: Ground Truth from Computer Games
https://is.gd/ZN8NrH

--

All Comments

Selena avatar
By Selena
at 2016-09-19T08:26
用GTA訓練的話 AI會不會看到拿球棒的人就直接撞下去?
Selena avatar
By Selena
at 2016-09-21T20:35
應該是只有訓練圖像辨識 沒有訓練駕駛邏輯
Frederica avatar
By Frederica
at 2016-09-23T20:41
GTA5還滿多三寶的
Robert avatar
By Robert
at 2016-09-27T03:07
自動撞警車系統?
Edwina avatar
By Edwina
at 2016-09-30T10:51
為什麼要人工標記分類道路場景...那不是AI要做的事?
Edwina avatar
By Edwina
at 2016-10-03T13:10
可以搶太平洋嗎
Kelly avatar
By Kelly
at 2016-10-03T23:02
蠻有趣欸ㄜ
Donna avatar
By Donna
at 2016-10-04T14:27
因為是監督式學習
Ula avatar
By Ula
at 2016-10-04T23:02
https://youtu.be/0BuSxS_8WRY 影片支援
Kristin avatar
By Kristin
at 2016-10-09T20:10
這遊戲真的是傳奇 可惜我沒空好好玩他
Hazel avatar
By Hazel
at 2016-10-10T02:37
這樣完全是機器視覺方面靠影像處理
如果是真實世界 可以借助雷達偵測 安全性更高
Jacob avatar
By Jacob
at 2016-10-13T20:26
大陸才又死一個 是有多懶需要用生命debug
Belly avatar
By Belly
at 2016-10-16T08:18
這樣節省很多成本,畢竟一款遊戲夏日大特賣只要3xusd

請益台南換輪胎

Bennie avatar
By Bennie
at 2016-09-16T10:37
前天晚上颱風天下班時 車子不知道壓到什麼胎壁破胎 輪胎是Fit3 右前輪Maxxis ma-307 185/55/16 因為車子目前只跑不到1萬2千公里 有需要前輪兩顆一起換嗎? 輪胎有裝oro胎內胎壓偵測器 如果只換一顆的話需要重做平衡定位嗎? 台南有哪間輪胎廠有maxxis ma-307 185/55/ ...

請問發電機上的零件名稱

Hardy avatar
By Hardy
at 2016-09-16T10:34
各位前輩先進好, 小弟開2005年的Savrin 2.0 今年6月換了發電機皮帶, 才過三個月就出現 雞雞雞 的聲音了 主要是發動時還有踩油門時很大聲。 牽回原廠技師把皮帶拆下來發現磨損 非常嚴重,檢查發電機說那個跟皮帶接 觸的圓盤已經壞了,手動去轉有歪歪的 現象 如圖 http://i.i ...

三寶爸兒童汽座的疑問

Lucy avatar
By Lucy
at 2016-09-16T09:15
目前開tierra 1.6 2000年 有兩個兒童汽座(大寶跟二寶) 大寶5歲 二寶3歲 三寶0.5歲 後排已放不下第三個汽座(後排中間已經沒啥空間) 想請問這個狀況要如何處理? Q1:現行法規幾歲以上可以不用汽座?想說可以大寶坐在後排中間(不過空間很小.大寶可憐) Q2:可以在副駕駛座放汽座?三寶一人一個. ...

別人不敢說?揭開十代civic底盤的秘密

Sierra Rose avatar
By Sierra Rose
at 2016-09-16T08:39
關於那個漏油之前在米國civicx論壇就討論過了 http://www.civicx.com/threads/oil-leaking-less-than-1000-miles.4680/page-3 有人回原廠檢查後把那些油擦掉並塗上染料追蹤之後也沒有再發現 最後一頁有人在里程數只有2哩,根本就還沒開出原 ...

CX-5 柴2WD 南部單請益

Quanna avatar
By Quanna
at 2016-09-16T06:30
趁著假期去到展間也問了一下菜單 請各位看看這個單還O不OK CX-5原價119.9 折1.9 總價118 含以下配備 1.導航卡 2.白金踏板 3.防水腳踏墊 4.防水托盤 5.隔熱紙FSK(F70+B20) 6.避光墊 7.鑰匙皮套 8.Etag 9.行車記錄器(響尾蛇A8) 10.行李箱內置護蓋 保險自 ...