據(jù)外媒報道，在最近的一項研究中，麻省理工學(xué)院（MIT）計算機科學(xué)與人工智能實驗室和豐田研究院的研究人員介紹了一款自動駕駛汽車開發(fā)平臺VISTA （自動虛擬圖像合成與轉(zhuǎn)換）。VISTA 可借助現(xiàn)實世界的數(shù)據(jù)集，合成車輛行駛軌跡的視角。盡管Waymo、優(yōu)步、Cruise 和 Aurora等自動駕駛汽車公司也都使用仿真環(huán)境來訓(xùn)練AI，但MIT聲稱其系統(tǒng)是少數(shù)不需要人工添加道路標(biāo)記、車道、樹木和物理模型等的系統(tǒng)之一，這將大大加快自動駕駛汽車的測試和部署。

（圖片來源：MIT官網(wǎng)）

據(jù)研究人員介紹，如果虛擬車輛不發(fā)生事故，VISTA 就會對其進行獎勵，從而激勵其學(xué)習(xí)應(yīng)對各種駕駛狀況，包括在車輛突然偏離軌道后重新獲得控制權(quán)。VISTA 由數(shù)據(jù)驅(qū)動，這意味著其根據(jù)數(shù)據(jù)合成的新軌跡與道路外觀、場景中所有物體的距離和運動保持一致，可以防止車輛在模擬中所學(xué)到的知識與在現(xiàn)實世界中的表現(xiàn)不一致。

為了訓(xùn)練 VISTA，研究人員從多條道路的真實駕駛中采集視頻數(shù)據(jù)。對于每幀畫面，VISTA 都會將每一個像素預(yù)測成一種3D點云。隨后，研究人員將虛擬車輛放置在環(huán)境中，并對其進行控制，以便在發(fā)出轉(zhuǎn)向命令時，VISTA 根據(jù)轉(zhuǎn)向曲線以及車輛的方向和速度，通過點云合成一條新的軌跡。

VISTA使用上述軌跡繪制逼真的場景，并估算繪制一個深度地圖，其中包含從車輛視角衡量物體距離的相關(guān)信息。通過將深度地圖與估算3D場景中攝像頭方向的技術(shù)相結(jié)合，該引擎可以在虛擬模擬器中精確定位車輛位置和與所有物體的相對距離，同時重新定位原始像素，從而從車輛的新視角重建周圍環(huán)境。

在使用VISTA模擬器進行10到15個小時的訓(xùn)練，行駛了1萬公里之后，虛擬車輛接受了測試。測試表明，此時虛擬車輛能夠在從未見過的街道上行駛。即使將其放置在即將發(fā)生碰撞的模擬路況中（例如只有一半車身上路或進入另一個車道），車輛也能在幾秒內(nèi)成功回到安全的行駛軌跡。

未來，研究團隊還希望 VISTA 能從單一駕駛軌跡仿真進化到模擬所有類型的路況，例如白天、黑夜、晴天和陰雨天氣。此外，他們還希望模擬與其他道路車輛之間更復(fù)雜的交互。