而对于英伟达来说，这种关注当然不算错，但却并不全面。文 | 智見 Time”，作者 | 308，編輯 | 經緯
端到端的到來，再一次推動了智能駕駛在全球範圍內的跨越式發展，也引發了大量關注。
尤其是在中國市場，端到端的智駕方案已經成爲整個行業的共識，各個玩家都在紛紛通過不同的方式擁抱端到端；由此，各個玩家在算法層面追求突破的同時，也充分意識到了車端算力的極端重要性——於是，大家又把關切的目光朝向了英偉達。
而對於英偉達來說，這種關注當然不算錯，但卻並不全面。
實際上，如果從英偉達在自動駕駛行業進行佈局的整體視角來看，車端算力本身，僅僅是英偉達參與到智能駕駛行業發展的冰山一角，這一點確實更受市場和普通消費者的關注。
但是，被嚴重忽視的是，圍繞着自動駕駛的整體技術實現路徑，英偉達實際上在用戶感知並不明顯的雲端、軟體側、工具鏈等方面都進行了全方位、多角度的佈局。
而這些整體佈局，也是英偉達通過自身的體系能力全面賦能自動駕駛的有力證據。
一個工具齊全的「廚房」
對於普通用戶來說，智能駕駛的體驗本身，往往與車企推送的一次次 OTA 升級密切相關，這些升級中包含的車端智駕算法模型，成爲了用戶實際智駕體驗不斷提升的關鍵——但問題在於，這些運行於車端的智駕算法模型，並非是憑空而生。
事情的真相是，它們是由車企或智能駕駛供應商基於雲端環境構建出來。
做一個不太恰當卻比較形象的比喻，如果說運行在車端的智駕算法模型，是一盤盤用戶可以品嚐的「菜品」，那麼這個雲端環境本身，更像是一個工具齊全、便利好用的「廚房」。
而在不少智駕玩家的選擇中，尤其是自研方案車企的智駕體系中，這個「廚房」本身，都是基於英偉達的技術來構建的。
這裏需要明確一個前提：對於所有致力於自動駕駛的玩家來說，自動駕駛能力的構建，都是一個極其複雜的系統性工作流程。粗略來講，它主要包括數據處理和神經網絡算法的構建這兩大模塊，而這兩個模塊都需要大量紛繁複雜的工作要處理——但在英偉達軟硬件技術的助力下，這些工作可以被處理得更加高效。
比如說，在自動駕駛的數據處理流程中，往往需要從大量的數據中尋找到一些安全性相關的邊緣案例（包含動態場景、多模態傳感器融合）並進行數據標註工作，才能夠服務於算法構建。因此，自動駕駛的數據處理環節，對於任何一個玩家來說，都是挑戰巨大、成本高企 的難題。
不過，一旦玩家們採用英偉達技術，就可以在英偉達雲計算平台（NGC）的助力之下，通過預訓練模型來註釋圖像，同時可以在圖像處理中採用來自於英偉達的視頻編解碼技術，並且可以通過英偉達 TAO AI 模型自適應平台來進行模型優化——其結果是，採用英偉達技術之後，人工標註工作可以減少高達 50%，而整個數據標註流程的效率可以提升 30%。
當然，針對特定玩家的自動駕駛技術路徑選擇，英偉達也可以提供相應的助力。
比如說，2024 年，理想汽車在自動駕駛技術方向上採用了端到端 + VLM 的技術方案，這一方案，對於多模態數據處理和智能駕駛的認知與決策能力提出了新要求。於是，在英偉達的幫助之下，理想汽車能夠對理想 L9 車型的數據進行重建和動態編輯，有效利用歷史數據，提高了數據處理的效率和模型訓練的泛化能力。
同時，英偉達 Replicator 能合成稀有場景數據，從而幫助智駕系統更好地處理邊緣情況；英偉達 NeMo 框架支持智能汽車的視覺語言模型應用，提供了從數據處理到模型訓練、模型驗證的解決方案；在模型部署優化方面，英偉達的 TensorRT-LLM 框架和深度學習加速器也都提供了很好的助力。
以上這些，其實都是英偉達爲理想汽車端到端 + VLM 方案的實現而提供的有效技術支撐。
另外，還有一個很容易被普通用戶忽略的信息是，類似於 DRIVE Orin 和 DRIVE Thor 這些功能強大的車端算力平台，也需要英偉達的軟體技術來加持。
比如說，爲了推動 Orin 和Thor 芯片更好地運行，英偉達專門開發了 DriveOS。
具體來說， DriveOS 是整個英偉達 DRIVE 軟體堆棧的基礎所在，也是針對車載加速計算而率先推出的安全操作系統，包括用於實現高效並行計算的 NVIDIA CUDA 庫、用於進行實時 AI 推理的 NVIDIA TensorRT，以及用於處理傳感器輸入的 NvMedia。
它包含了跨 CPU、GPU 和其他 DRIVE AGX 硬件加速引擎構建、調試、分析和部署自動駕駛汽車和自動駕駛汽車應用程序所需的所有軟體、庫和工具，可以爲自動駕駛開發者提供一個安全可靠的執行環境，並提供安全啓動、安全服務、防火牆和無線 OTA 更新等服務。
值得強調的是，在 DriveOS 的基礎上，英偉達 DriveWorks 也提供了對自動駕駛汽車開發來說至關重要的中間件功能。這些功能包括傳感器抽象層 (SAL) 與傳感器插件、數據記錄器、車輛 I/O 支持和深度神經網絡 (DNN) 框架——該工具擁有模塊化和開放的特點，在設計上符合汽車行業軟體標準。
可以說，沒有 DriveOS 和 DriveWorks 的加持，Orin 和 Thor 就無法在車端更好地運行。
另外，不得不強調，儘管英偉達的 Orin 和 Thor 確實成爲衆多智駕玩家在車端算力平台選擇上的不二之選，但是被大多數普通用戶忽略的是，其實在軟體層面，英偉達也基於這些車端算力平台做了非常巧妙的佈局，從而不斷提升車端算力平台的運算效率。
一個典型的案例，是英偉達爲自動駕駛客戶提供的一個基於軟硬件結合的 PVA 方案。
具體來說，爲了減輕越來越繁重的 AI 工作負載，開發者可以直接在 Orin 和 Thor 這樣的 SoC 中運行一個專門的可編程視覺加速器（PVA）， 它可以承擔一些由 GPU 或其他硬件引擎處理的任務， 從而降低負載並使之能夠更加高效地管理其他關鍵任務。
本質上，PVA 更加類似於一個可以由開發者自定義的 AI 加速器，來解決自動駕駛汽車開發中的計算問題，從而能夠更高效、更有效地處理複雜的視覺任務，並提高整體系統性能——目前，基於 PVA 的優化解決方案顯著提高了蔚來自動駕駛的性能，並被廣泛應用於蔚來的量產車型中。
車端佈局，不僅僅是算力
當然，從普通用戶感知的角度，英偉達在自動駕駛行業最受關注也最爲認知的，是它所提供的車端智能駕駛計算平台，也就是已經大規模上車的 Orin 和即將上車的 Thor。
這並不令人感到意外。
確實，從當前行業的落地來看，AI 算力爲 254 TOPS 的英偉達 Orin 計算平台，已經成爲事實上的高階智能駕駛標準配置。
從目前已經走向市場的情況來看，無論是蔚來、小鵬、理想等新勢力品牌，還是智己、騰勢、極氪等來自於大型車企的新品牌，都已經在旗下車型中採用了英偉達 Orin 方案。
可以說，從整個自動駕駛行業商業落地的維度來看，英偉達 Orin 是目前全球範圍內出貨量和車端部署量最大的算力平台產品。
當然，從技術發展的維度，作爲 Orin 的繼任者，Thor 本身更值得關注。
Thor 實際上是英偉達最新一代面向自動駕駛的車端計算平台，它也將高階的智能駕駛功能和車載信息娛樂功能集成到了單個安全可靠的系統中。這款自動駕駛汽車處理器採用了英偉達的最新 CPU 和 GPU 技術，包括用於 Transformer 和生成式 AI 功能的 NVIDIA Blackwell GPU 架構。
從算力層面來說，英偉達 Thor 支持 8 位浮點格式 (FP8)，可在降低整體系統成本的同時，提供 1000 INT8 TOPS 性能——這一算力幾乎是 Orin 的 4 倍。
當然，在具體的商業落地層面，Thor 也已經獲得了大量合作伙伴的認可，並由此取得了明顯的突破。
具體來說，2024 年，Thor 獲得了越來越多的主機廠客戶。
比如說，在 CES 2024 活動期間，理想汽車宣佈將在 Thor上構建其未來汽車產品；而在 GTC 2024 活動上，比亞迪宣佈將基於 Thor 構建下一代電動車型。同時，廣汽埃安宣佈旗下高端豪華品牌昊鉑下一代電動汽車將採用 Thor 平台，新車型將於 2025 年開始量產。
另外，除了主機廠之外，Thor 也正在被一批來自於卡車、自動駕駛出租車、配送車等其他細分領域的廠商所選用。比如說，來自硅谷的自動駕駛配送車輛製造商 Nuro，已經選擇 DRIVE Thor 來爲它旗下的集成式自動駕駛系統 Nuro Driver 提供助力。
總體可見，Thor 的商業落地場景，已經不僅僅是瞄準了資金實力更加雄厚的主機廠，也包括一批致力於推進自動駕駛前沿技術發展的方案商——本質上，這也是英偉達自身在面向自動駕駛行業發展過程中的更有效選擇。
值得強調的是，在 Orin 和 Thor 逐漸走向落地的過程中，英偉達不僅僅提供了算力基礎本身，也提供了諸如上文中提到的一系列軟體和算法服務——更重要的是，英偉達也在端到端、大模型等前沿技術上持續探索，爲整個自動駕駛行業的發展方向尋求更優解。
在虛擬之中，走完現實的路
在自動駕駛的落地過程中， 還有一個所有玩家都不得不面臨的真正難題：當一個智能駕駛模型被開發出來之後，如何對它在實際場景中的效果進行真正有效的測試和驗證。
到了端到端時代，這個難題更是被無限放大，成爲各家在智能駕駛開發中的終極考驗。
其原因是，人類的道路場景本身就複雜多樣，任何一家車企都沒有能力在全世界的每個角度進行實地驗證；除此之外，即使是同樣的道路場景，也存在着天氣狀況、擁堵情況、交通參與者、是否施工等各種各樣的差異——這就意味着，在真實的場景中進行各種各樣的驗證，是一件根本不可能完成的事情。
因此，尋找到一個能夠具備廣泛通用性、普適性的替代方案，就顯得極爲關鍵——正是基於這一原因，英偉達也在自動駕駛的仿真測試方面進行了深入佈局。
具體來說，就是 NVIDIA Omniverse 平台。
從概念上來說，NVIDIA Omniverse 是一個基於 USD（Universal Scene Description，通用場景描述，一種能夠表述精準物理模型的通用標準，它由蘋果、英偉達等公司定義）、用於創建和運行各種虛擬世界應用的平台。
這一平台可以應用到多個領域和行業——而對於自動駕駛來說，它能夠很好地滿足行業裏對於高保真自動駕駛汽車仿真的需求。
事實上，仿真對於開發和驗證自動駕駛汽車的安全關鍵功能而言至關重要，但需要在部署之前進行充分測試。高保真仿真爲各種場景下的系統訓練提供安全、可控且逼真的環境——利用 Omniverse，可有效地對現實世界條件進行仿真，使車輛得以在上路前通過數字孿生進行安全測試和驗證。
比如說，針對各種駕駛條件，尤其是一些無法在現實世界中復現的場景，比如說惡劣的天氣、交通變化或者罕見的危險場景，Omniverse 可以利用生成式 AI 的一些最新技術進行精準建模，並且可以作爲訓練數據的一部分。
與此同時，當自動駕駛開發者在進行任何自動駕駛車輛的物理原型設計之前，可以通過 Omniverse 部署虛擬車隊來設計新傳感器和堆棧的原型，從而減低在實際開發過程中的物理測試和驗證成本。
值得一提的是，爲了滿足行業裏對於自動駕駛傳感器和周圍環境的物理特性和行爲進行精確建模的需求，英偉達在 GTC 2024 上還專門發佈了 Omniverse Cloud 應用編程接口（API），它們彙集了一個由仿真工具、應用和傳感器組成的豐富生態系統，從而可以滿足高保真傳感器仿真的關鍵需求——以安全的方式探索自主系統將會遇到的無數現實場景。
比如說，通過 Omniverse Cloud 應用編程接口，開發者可以訪問不同製造商提供的傳感器模型，其中包括禾賽、速騰、Seyond 等激光雷達製造商，也包括 OMNIVISION、安森美和索尼等視覺傳感器供應商。同時，開發者還可以調用這些應用編程接口，從而生成大量且多樣的合成數據集，爲訓練和驗證這些自主系統所使用的感知模型提供關鍵數據。
除了能夠解決在自動駕駛落地場景中的仿真測試問題，NVIDIA Omniverse 也能夠很好地服務於於自動駕駛汽車本身的外觀設計、可視化等。
比如說，專注於整車研發、核心零部件研發及製造、新能源汽車研發等領域的阿爾特汽車，就藉助 NVIDIA Omniverse 平台、NVIDIA Modulus 以及 NVIDIA RTX GPU 的算力構建了一個面向汽車設計、評審與性能優化的全方位數字化平台。
其中，通過 Omniverse Composer，阿爾特的設計工程師們可以快速切換不同的汽車造型，從而在短時間內探索多種設計方案；利用 Omniverse Connector，阿爾特使不同 DCC 軟體和 Composer 能夠進行實時協同，實現了工程師之間的並行工作，極大提高研發效率。
有意思的是，阿爾特汽車還利用 Omniverse Action Graph 製作汽車組件拆解爆炸效果視頻，節省大量時間。
技術體系，才是核心競爭力
如果站在技術落地的角度來看，智能駕駛是人工智能面向物理世界和汽車行業進行應用和賦能的典型場景。
實際上，人工智能雖然面向各行各業都擁有很大的賦能潛力，但這個過程都是非常艱難的。因爲它需要的並不僅僅是人工智能算力的構建；更爲重要的環節是，如何通過一系列複雜的全棧技術佈局，把算力應用和服務於特定的行業場景，從而賦能於人類。
某種程度上，人工智能的落地，考驗的是體系能力。
從這個角度來看，英偉達在智能駕駛行業扮演的角色，也不僅僅是車端算力平台的提供者的角色，而是通過它在從雲端訓練到車端推理的一系列過程中的整體佈局，來實現對於自動駕駛行業的底層賦能。
這其中，軟體的角色最容易被忽視，但卻同樣重要。
也許，從這個角度來看，我們也許能夠更加容易理解，儘管英偉達爲整個人工智能行業的發展提供了足夠強大和先進的算力平台，但從業務邏輯來說，作爲英偉達掌門人的黃仁勳，更願意在公開場合反覆強調它在軟體算法和應用生態的佈局。
從自動駕駛行業發展的角度來看，英偉達其實也一直是在軟硬件一體化的角度去進行佈局和深耕，並且最終獲得市場認可。
儘管市場和消費者更加關注硬件和算力參數本身，但不得不承認的是，軟體能力也是英偉達在自動駕駛的技術和商業體系中所構建出來的核心競爭力。
軟硬件之間密不可分，它們共同構成了英偉達在自動駕駛行業的技術護城河。
當然，無論是否被市場充分認知，面對自動駕駛領域正在發生的 重大技術變革和商業落地機遇，英偉達硬件和軟體的持續深耕還將繼續，並且會更加緊密——這固然是技術的邏輯，但它也是商業的邏輯，但最終，這也將會是英偉達獲得市場認可、並能夠繼續爲自動駕駛行業的發展貢獻長期價值的核心驅動力之所在。