11月11-13日,“2020世界智能網(wǎng)聯(lián)汽車(chē)大會(huì)(WICV2020)”在北京隆重召開(kāi),本次大會(huì)由北京市人民政府、工業(yè)和信息化部、公安部、交通運(yùn)輸部、中國(guó)科學(xué)技術(shù)協(xié)會(huì)共同主辦。旨在打造全球智能網(wǎng)聯(lián)汽車(chē)領(lǐng)域內(nèi)規(guī)模最大、級(jí)別最高、影響力最大的世界級(jí)平臺(tái),持續(xù)引領(lǐng)全球汽車(chē)產(chǎn)業(yè)發(fā)展趨勢(shì),全面開(kāi)啟智能網(wǎng)聯(lián)汽車(chē)產(chǎn)業(yè)發(fā)展的新征程。下面是英偉達(dá)汽車(chē)業(yè)務(wù)發(fā)展總經(jīng)理Dan Berman在本次論壇上的發(fā)言:
大家好,我是丹-伯曼,英偉達(dá)汽車(chē)業(yè)務(wù)發(fā)展總經(jīng)理,正式開(kāi)始前我想代表英偉達(dá)公司 向世界智能網(wǎng)聯(lián)汽車(chē)大會(huì)組委會(huì)表示感謝,現(xiàn)在我們馬上開(kāi)始。
英偉達(dá)一直相信未來(lái)所有的車(chē)都將實(shí)現(xiàn)自動(dòng)化。英偉達(dá)的目標(biāo)就是推動(dòng)汽車(chē)領(lǐng)域的這場(chǎng)革新。我們今天探討的不僅僅是自動(dòng)駕駛汽車(chē),還有與行業(yè)相關(guān)的各種問(wèn)題,如裝配線等。那我們是如何推動(dòng)的呢?我們生產(chǎn)出了有史以來(lái)第一款專(zhuān)用于機(jī)器人的芯片,這就是幾年前推出的芯片系統(tǒng),以及下一步將推出ORIN 芯片系統(tǒng)。今天我會(huì)詳細(xì)介紹一下ORIN。
英偉達(dá)關(guān)注的不僅僅是硬件,除此之外,我們擁有豐富的軟件棧,專(zhuān)注于自動(dòng)駕駛和工業(yè)應(yīng)用,我們必須專(zhuān)注于汽車(chē)的發(fā)展,當(dāng)大家判斷其發(fā)展趨勢(shì)時(shí),我覺(jué)得最重要的一點(diǎn)是未來(lái)所有的汽車(chē)都將是以軟件定義,為了實(shí)現(xiàn)這一革新,大家要去關(guān)注一些基本的東西。而我認(rèn)為首要的,就是集中化。原因是,當(dāng)汽車(chē)將變得越來(lái)越復(fù)雜的時(shí)候,大家希望能夠在產(chǎn)品的生命周期內(nèi)簡(jiǎn)單高效地提升性能。就像手機(jī)的迭代一樣,而這是非常關(guān)鍵的。因此,我們著重關(guān)注集中的核心芯片,即在一個(gè)ECU上運(yùn)行不同類(lèi)型的應(yīng)用程序。
第二,開(kāi)放。豐富的軟件棧,可以滿(mǎn)足不同類(lèi)型的應(yīng)用和需求,如停車(chē)、自動(dòng)駕駛或駕駛艙解決方案。它要足夠強(qiáng)大,有強(qiáng)大的計(jì)算能力。因?yàn)槿绻愣ㄎ挥谖磥?lái)自動(dòng)駕駛或是其他的先進(jìn)的項(xiàng)目中就需要大量的經(jīng)費(fèi)。至于今后的發(fā)展,說(shuō)實(shí)話(huà),還沒(méi)有人能夠確定實(shí)現(xiàn)自動(dòng)駕駛所需的計(jì)算量,因?yàn)槲覀冞€沒(méi)到那一步。對(duì)于你所投入的每一筆資金都要算好其邊際價(jià)值。第三,也是很重要的一點(diǎn),應(yīng)該是安全,意味著你需要確保你使用的硬件和軟件都能解決功能安全問(wèn)題。因?yàn)槿嗣P(guān)天。所以,當(dāng)你真正推出這樣一款應(yīng)用時(shí),需確保你的系統(tǒng)是安全的,且不會(huì)出錯(cuò)。英偉達(dá)的戰(zhàn)略目標(biāo)是實(shí)現(xiàn)端到端的軟件定義,不只局限在車(chē)內(nèi),還有數(shù)據(jù)中心以及各種應(yīng)用。我們是市場(chǎng)上唯一能夠做到這一點(diǎn)的公司,并在不同領(lǐng)域發(fā)揮我們的所有特長(zhǎng)和能力。先收集數(shù)據(jù),通過(guò)傳感器進(jìn)入數(shù)據(jù)中心并進(jìn)行模擬訓(xùn)練,之后創(chuàng)建視頻,使用DGX A100系統(tǒng)到模擬環(huán)境中進(jìn)行驗(yàn)證和訓(xùn)練。因?yàn)槲覀冇蠧onstellation和Drive SIM ,也就是我們的軟件模擬器,我們?cè)贑onstellation之上進(jìn)行模擬測(cè)試。至于在運(yùn)行車(chē)輛上,我們安裝了Drive AV和Drive IX自動(dòng)駕駛系統(tǒng)。二者都是在Xavier或ORIN 系統(tǒng)之上的自動(dòng)駕駛和駕駛艙應(yīng)用。最后一欄是Estimator,對(duì)于大家和更多的新人來(lái)說(shuō),我想這是Driver系列中最好控制的了,支持遠(yuǎn)程操控。駕駛員終有一天會(huì)離開(kāi)方向盤(pán),所以要保證低延遲,為了實(shí)現(xiàn)這個(gè)目標(biāo),我們不僅在芯片上下功夫,也力圖打造一個(gè)可擴(kuò)展架構(gòu)。我們要為不同生態(tài)系統(tǒng)的合作伙伴解決相應(yīng)的市場(chǎng)問(wèn)題,從ADAS高級(jí)輔助駕駛系統(tǒng)到通過(guò)兩塊 Orin SoC 和兩塊基于安培架構(gòu)的 GPU 組合,實(shí)現(xiàn)有2000TOPS算力的Robotaxi 計(jì)算平臺(tái)。為此,我們有著單一可擴(kuò)展架構(gòu),并提供軟件兼容,意味著你們正在使用的是相同的API。即您使用ADAS時(shí)的API自動(dòng)駕駛功能最高可達(dá)到L5級(jí),您可以按需選擇級(jí)別。這個(gè)過(guò)程需要大量的工程成本,因?yàn)闆](méi)有獨(dú)立的ECU。浪費(fèi)了大量的人力也未必能實(shí)現(xiàn)在不同類(lèi)型的項(xiàng)目和團(tuán)隊(duì)成員之間的知識(shí)轉(zhuǎn)移,即在相關(guān)產(chǎn)品上所學(xué)的知識(shí)。
那么,接下來(lái)介紹一下ORIN。ORIN是有史以來(lái)性能最好的芯片系統(tǒng),領(lǐng)先行業(yè)一大截,性能高達(dá)200TOPS,可通過(guò)開(kāi)放的CUDA Tensor Cores 和DLA與12個(gè)Hercules ARM64 CPU等進(jìn)行編程。最重要的是,正如我提到的,我們關(guān)注安全性能,提供獨(dú)立的安全島、安全的密鑰存儲(chǔ)。而我們的目標(biāo)是達(dá)到ASIL-B和ASIL-D系統(tǒng)評(píng)級(jí)?;谖覀僗avier上的成功經(jīng)驗(yàn),我們有信心能夠做到這一點(diǎn)。談到英偉達(dá)時(shí),縱觀市場(chǎng),在很多情況下人們傾向于認(rèn)為,我們是一個(gè)硬件公司,重點(diǎn)打造的是GPU等等。但實(shí)際上,當(dāng)大家看英偉達(dá)的汽車(chē)業(yè)務(wù)時(shí)會(huì)發(fā)現(xiàn)我們將大部分資源都投入在了軟件上。我想用這張幻燈片來(lái)告訴大家我們是如何做的,實(shí)際上它也適用于我們所有的生態(tài)系統(tǒng)。圖片的最下端是我們的硬件,也就是ORIN SOC和我們車(chē)輛中所用的HYPERION傳感器。除此之外,我們有Drive OS,基本的API,可以通過(guò)CUDA或Tensor RT自行編程。除此之外,我們還有一個(gè)Driveworks框架。我們提供各種您開(kāi)發(fā)自動(dòng)駕駛期間重要的工具,如校驗(yàn)記錄儀和障礙物傳感器。我們提供所有這些生態(tài)系統(tǒng),讓人們能夠開(kāi)發(fā)他們的應(yīng)用。當(dāng)然,有很多企業(yè)都想與我們合作,我們也在企業(yè)內(nèi)部進(jìn)行應(yīng)用來(lái)開(kāi)發(fā)我們的應(yīng)用程序,比如之前提到應(yīng)用于自動(dòng)駕駛的Drive AV和駕駛艙應(yīng)用Drive IX我們開(kāi)發(fā)Drive AV和Drive IX的原因。不僅僅是因?yàn)槲覀兿胩峁┊a(chǎn)品,當(dāng)然啦,這也很重要。我們希望能夠成為行業(yè)領(lǐng)先者,并讓每個(gè)人都能享受自動(dòng)駕駛,它對(duì)解決所有的技術(shù)問(wèn)題以及應(yīng)對(duì)開(kāi)發(fā)系統(tǒng)的困難也有很大的幫助。而我們不僅僅是依靠我們的生態(tài)系統(tǒng)來(lái)修復(fù)bug,我們自己動(dòng)手來(lái)打造更好的產(chǎn)品。
今天我演講時(shí)間有限,所以我準(zhǔn)備挑一個(gè)重點(diǎn),那就是感知。在很多情況下,感知被視為商品類(lèi)概念。但實(shí)際上,攝像頭感知是一個(gè)非常復(fù)雜的任務(wù),通常也會(huì)有很多的解決方案,比如障礙物檢測(cè)、地圖檢測(cè)、路徑檢測(cè)、紅綠燈感知、交叉口檢測(cè)等。而最重要的部分不僅僅在于檢測(cè),更在于在不同的條件下檢測(cè),如不同的天氣,不同時(shí)間等,這也是需要大家努力攻克的領(lǐng)域。那我們?nèi)绾巫龅酶茫鯓尤プ?,怎樣做更有效呢?今天我的時(shí)間有限,只能介紹我們正在開(kāi)發(fā)的攝像頭感知模塊中一些很酷的功能。所以首先是全景式的分割,從幻燈片的上方可以看到,我們能準(zhǔn)確地識(shí)別到圖片中的所有物體的像素水平。從下往上看,你可以看到我們是如何準(zhǔn)確地定位物體,并將其組合。圖中每個(gè)數(shù)字都代表了我們識(shí)別到的每個(gè)對(duì)象的ID,大家可以看到我們?nèi)绾问褂盟鼇?lái)識(shí)別車(chē)輛以及單一的物體,我們也能識(shí)別出背后的物體。即便在不同的場(chǎng)景下,這項(xiàng)任務(wù)非常復(fù)雜,但我們做到了。另一個(gè)很酷的功能是未來(lái)移動(dòng)軌跡預(yù)測(cè)。為此,我們結(jié)合時(shí)間序列的圖像,也就是圖上這個(gè),非常精確地識(shí)別車(chē)輛移動(dòng)軌跡。再結(jié)合準(zhǔn)確的地圖信息,也就是灰線,我們結(jié)合兩個(gè)系統(tǒng)來(lái)預(yù)測(cè)車(chē)輛的行駛軌跡。當(dāng)我們推出產(chǎn)品時(shí),我們不需要現(xiàn)有的圖像,我們只需要一個(gè)攝像頭或雷達(dá)輸入。當(dāng)然現(xiàn)有的圖像也可以用在里面,它將更為準(zhǔn)確。但是我們也可以依靠攝像頭,這里是一個(gè)四攝系統(tǒng)的例子。在右側(cè),可以看到這個(gè)實(shí)時(shí)預(yù)測(cè)的自上而下的視圖,所以我們檢測(cè)周?chē)奈矬w
并預(yù)測(cè)他們會(huì)開(kāi)到哪里去,也就是其移動(dòng)軌跡。所以,一般來(lái)說(shuō),暖色代表著較近的時(shí)間序列,冷色代表較遠(yuǎn)的時(shí)間序列。在這種情況下,大家可以看到系統(tǒng)是如何預(yù)測(cè)轉(zhuǎn)彎的,比如在十字路口右轉(zhuǎn),還可以檢測(cè)畫(huà)面中的靜止物體。大家看這里就是一個(gè)變道的例子,可以看到汽車(chē)如何實(shí)時(shí)預(yù)測(cè)是否變道,繼續(xù)在當(dāng)前車(chē)道行駛或是變道。另一個(gè)有趣的功能是十字路口的檢測(cè)。紅色代表自動(dòng)駕駛汽車(chē)在十字路口處的駛?cè)刖€,橙色代表其他車(chē)輛進(jìn)入路口的行駛線,而綠色代表所有車(chē)輛在十字路口的駛出線,黑色代表不可行駛的車(chē)道線,也就是說(shuō),你不能在那里行駛。所以通過(guò)這些例子我們可以看一下,我們的系統(tǒng)在不同場(chǎng)景下是如何預(yù)測(cè)的。這一功能相當(dāng)強(qiáng)大,我想給大家看一些例子,即它是如何實(shí)時(shí)預(yù)測(cè)的。當(dāng)你駛到十字路口時(shí),需要做出判斷,即車(chē)可以開(kāi)往哪里。而在這個(gè)例子中,我們的系統(tǒng)可以準(zhǔn)確地判斷出是否可以直行、右轉(zhuǎn)或左轉(zhuǎn),或是U型轉(zhuǎn)彎。而以上技術(shù)可以應(yīng)用于三個(gè)方面,一種是檢測(cè),告知你應(yīng)該往哪開(kāi);第二種是將其與精確的地圖數(shù)據(jù)相結(jié)合;而第三種方案是用這個(gè)檢測(cè)來(lái)創(chuàng)建地圖數(shù)據(jù)。因?yàn)閯?chuàng)建地圖數(shù)據(jù)本身是非常復(fù)雜的,需要花費(fèi)大量的人力,所以利用我們的這一功能來(lái)創(chuàng)建地圖數(shù)據(jù)很省事。另一個(gè)很酷的功能,提供停車(chē)解決方案,在這些例子中,我們檢測(cè)不同環(huán)境下、不同類(lèi)型的停車(chē)點(diǎn)。這是進(jìn)入停車(chē)場(chǎng)的視角,紅色的代表停車(chē)位的邊界,即便車(chē)位沒(méi)有全部劃出或是有著不同形狀,我們都能檢測(cè)出。而這一功能,對(duì)代客泊車(chē)等非常重要。我想再?gòu)?qiáng)調(diào)一下,非常重要的一點(diǎn),英偉達(dá)要打造一個(gè)開(kāi)放的平臺(tái),讓每個(gè)人都能在此基礎(chǔ)上進(jìn)行開(kāi)發(fā),你不需要購(gòu)買(mǎi)我們所有的產(chǎn)品,按需選擇即可,再自己開(kāi)發(fā)。我們正與汽車(chē)、卡車(chē)、制圖和模擬公司等合作,也鼓勵(lì)高校的各類(lèi)創(chuàng)業(yè)公司利用我們的平臺(tái)、豐富的軟件棧和強(qiáng)大的硬件,開(kāi)發(fā)新的服務(wù)。
在結(jié)束之前,我想邀請(qǐng)大家參加我們12月15日到12月18日的GTC 中國(guó)線上大會(huì),會(huì)議大部分內(nèi)容將以中文進(jìn)行,當(dāng)然也會(huì)有CEO黃仁勛先生的主題演講,歡迎大家的加入。
感謝大家的聆聽(tīng),再次感謝世界智能網(wǎng)聯(lián)汽車(chē)大會(huì)組委會(huì)邀請(qǐng)我們參加這場(chǎng)會(huì)議,謝謝大家。
(注:本文根據(jù)現(xiàn)場(chǎng)速記整理,未經(jīng)演講嘉賓審閱,僅作為參考資料,請(qǐng)勿轉(zhuǎn)載?。?/strong>