北京車展正如火如荼地進(jìn)行中,已經(jīng)進(jìn)軍汽車領(lǐng)域的英偉達(dá)雖然沒有在車展亮相,但并未置身事外。
2024年4月24日,英偉達(dá)(NVIDIA)在北京辦公室召開了北京車展媒體溝通會。期間,履新半年多的NVIDIA全球副總裁、汽車事業(yè)部負(fù)責(zé)人吳新宙和NVIDIA汽車事業(yè)部數(shù)據(jù)中心副總裁Norm Marks就英偉達(dá)過去一年在汽車領(lǐng)域的技術(shù)更新和AI數(shù)據(jù)中心等進(jìn)行了介紹。
從AI 1.0時代邁向AI 2.0時代
據(jù)外媒消息,NVIDIA近日宣布已經(jīng)同Run:ai簽訂最終收購協(xié)議,其中Run:ai的產(chǎn)品能夠?qū)崿F(xiàn)高效GPU集群的資源利用,即產(chǎn)品能夠支持開發(fā)人員并行運行多個AI工作負(fù)載,從而提高AI芯片的利用效率并降低成本。此外,還有消息稱NVIDIA將收購以色列初創(chuàng)公司Deci,該創(chuàng)企可提供高效的生成式AI和計算機(jī)視覺模型,能夠部署在各種環(huán)境中,同時保持?jǐn)?shù)據(jù)安全并控制推理成本。
以上最新的收購信息無不突顯出NVIDIA在當(dāng)前AI定義汽車(AI 2.0時代)背景下對于AI的重視。正如吳新宙在媒體溝通會上所講,生成式AI接下來會進(jìn)一步提升自動駕駛的天花板。
吳新宙在會上表示,過去的軟件定義汽車,即AI 1.0時代,需要大量工程師介入,所有組件的算法開發(fā)量非常巨大,且需要非常好的基礎(chǔ)建設(shè)設(shè)施支持?jǐn)?shù)據(jù)閉環(huán)。而NVIDIA希望,在AI 2.0時代,大部分模型都能夠在云端完成訓(xùn)練,即實現(xiàn)通過數(shù)據(jù)驅(qū)動的方式,車端觸發(fā)Edge Case案例,然后通過自動數(shù)據(jù)驅(qū)動完成模型的自我迭代。同時也希望在云端通過仿真完成大部分的驗證,極大地減少車端大規(guī)模設(shè)備部署和測試的依賴性。
既然AI定義汽車被認(rèn)為是未來汽車發(fā)展的必然趨勢,那么NVIDIA在智能駕駛軟件和座艙領(lǐng)域有哪些舉措?這也是此次媒體溝通會的重點,即NVIDIA的三步走規(guī)劃。
第一步是完善現(xiàn)有的L2和L2+系統(tǒng),以達(dá)到市場先進(jìn)水平或者第一梯隊水平;第二步希望L2++領(lǐng)域取得新突破,實現(xiàn)未來軟件棧的端到端可訓(xùn)練,將上游模型和下游模型打通,并將VLM、LLM運用到自動駕駛;第三步就是希望能夠在2026年量產(chǎn)的L3,實現(xiàn)完全自動駕駛。
因此,NVIDIA加快AI定義汽車的發(fā)展速度的優(yōu)勢在于,將AI對于整體硬件架構(gòu)的優(yōu)化運用到車端芯片。吳新宙透露,NVIDIA將于2025年實現(xiàn)其車載計算平臺DriveThor的量產(chǎn)裝車,助力LLM大語言模型在端側(cè)的部署,從而實現(xiàn)高效的智能座艙。
數(shù)據(jù)!數(shù)據(jù)!還是數(shù)據(jù)!
汽車從設(shè)計到落地,到最終的上路,都涉及龐大的數(shù)據(jù)量,如何安全地處理數(shù)據(jù)一直是各大汽車制造商和供應(yīng)商關(guān)注的重點。
在自動駕駛領(lǐng)域,除了AI與大模型,目前NVIDIA還在使用生成式數(shù)據(jù),特別是其自研渲染工具Omniverse,能夠?qū)崿F(xiàn)數(shù)據(jù)生成,補(bǔ)足仿真Corner Case,從而快速轉(zhuǎn)成虛擬數(shù)據(jù),然后進(jìn)行隨機(jī)處理,衍生出更多的Corner Case。
目前就有多家中國車企通過Omniverse虛擬現(xiàn)實技術(shù)實現(xiàn)對汽車制造工廠的工作流程優(yōu)化,例如比亞迪。NVIDIA中國區(qū)汽車事業(yè)部負(fù)責(zé)人劉通透露,除了在端到端全棧式合作,包括車端芯片DRIVE Orin和DRIVE Thor、智駕芯片和數(shù)據(jù)中心端的解決方案等,比亞迪和NVIDIA還在智能工廠方面進(jìn)行合作,利用Omniverse做自主機(jī)器的仿真,包括物流小車、機(jī)械臂等。
就仿真而言,NVIDIA不止關(guān)注像素渲染,還一直使用毫米波雷達(dá)和激光雷達(dá)進(jìn)行數(shù)據(jù)訓(xùn)練,進(jìn)行實時算法驗證。此外,NVIDIA將Omniverse數(shù)據(jù)接口開放給所有的生態(tài)圈協(xié)作方,從而提高自動駕駛的開發(fā)效率。
Norm Marks表示,自動駕駛汽車1.0時代主要是基于標(biāo)注圖像的訓(xùn)練,并在上面開發(fā)和部署深度神經(jīng)網(wǎng)絡(luò)的集成,可能會有40-50個深度神經(jīng)網(wǎng)絡(luò)從L2+層級轉(zhuǎn)向更高級的自動駕駛。假設(shè)一個車隊50輛測試車,每周可能會生成2PB的數(shù)據(jù),但其中只有10%-15%會得到標(biāo)注。而2.0時代是基于視頻進(jìn)行模型的訓(xùn)練,就像真人看世界那樣,是一整個大的融合世界的統(tǒng)一模型。
Norm Marks還預(yù)計,未來自動駕駛汽車2.0轉(zhuǎn)型的模型規(guī)模將增長13倍,數(shù)據(jù)存儲規(guī)模將增長17倍。而如果以GPT4作為基礎(chǔ)的話這可能需要上萬的服務(wù)器節(jié)點,即達(dá)到超算水平。
NVIDIA的NeMo平臺可作為一站式工具助力構(gòu)建大語言模型,從最開始的數(shù)據(jù)準(zhǔn)備、數(shù)據(jù)獲取、數(shù)據(jù)測轉(zhuǎn)、預(yù)訓(xùn)練、模型定制化、提示語調(diào)優(yōu)化以及人為反饋進(jìn)入閉環(huán),包括后續(xù)的信息檢索,實現(xiàn)比較精確的信息檢索。
汽車業(yè)務(wù)起勢
2019年,特斯拉發(fā)布自研的Hardware 3.0系統(tǒng),正式宣布NVIDIA與特斯拉在汽車芯片業(yè)務(wù)的“斷交”。但就在這時,中國新能源車企小鵬汽車進(jìn)入NVIDIA汽車業(yè)務(wù)合作版圖,為NVIDIA的汽車業(yè)務(wù)添了一把“火”。
今年3月,NVIDIA宣布了一批汽車合作商,包括比亞迪和小鵬以及廣汽埃安旗下昊鉑(Hyper)等車企,以及文遠(yuǎn)知行等智駕技術(shù)解決方案供應(yīng)商。此前,理想汽車和吉利旗下極氪品牌也表示將使用NVIDIA的Drive Thor芯片。
因此即使此次NVIDIA并未在北京車展中設(shè)立展臺,但各大車企在宣傳自家車型時,都會提及搭載了NVIDIA的芯片和技術(shù)。例如北京車展期間,極越汽車就宣布其2026年量產(chǎn)車型將搭載NVIDIA最新一代車載計算平臺。
正如劉通所言,NVIDIA擁有龐大的中國汽車客戶數(shù)量,涵蓋大部分傳統(tǒng)車企和主流車企,包括目前大熱的小米SU7。
財報顯示,在2024財年第四財季,NVIDIA實現(xiàn)營業(yè)收入221億美元,同比增長265%,環(huán)比增長22%,而NVIDIA汽車業(yè)務(wù)營收僅為2.8億美元,環(huán)比增長8%,同比卻下降4%。
雖然目前汽車業(yè)績占NVIDIA整體業(yè)績的比重并不大,甚至與其他核心業(yè)務(wù)相比稍顯遜色。但作為英偉達(dá)CEO黃仁勛口中的未來三大支柱業(yè)務(wù)之一,汽車業(yè)務(wù)依然被寄予厚望。
憑借獨特的算力支持,以及一系列產(chǎn)品的強(qiáng)大功能,NVIDIA致力于加速汽車行業(yè)的變革。未來,NVIDIA將繼續(xù)關(guān)注客戶的實際需求,在汽車設(shè)計、工程制造、數(shù)據(jù)科學(xué)、用戶體驗,甚至是金融服務(wù)等多個領(lǐng)域助力車企實現(xiàn)向AI 2.0時代的轉(zhuǎn)變。