智駕網 2025-01-11 18:22
Cosmos世界基礎模型落地,英偉達以AI推進自動駕駛迭代
分享
端到端自動駕駛的實現需要海量數據的計算和處理,而在AI技術的運用下,這一研發(fā)過程的效率大幅提升。英偉達在CES 2025上用新技術宣告:AI技術讓自動駕駛的實現不再遙遠。

在CES 2025上,英偉達創(chuàng)始人兼CEO黃仁勛表示:“AI正以‘驚人的速度’發(fā)展?!?/p>


理想汽車創(chuàng)始人李想也在2024年底做出過相同的判斷——AI會讓人類發(fā)生根本性的改變,AI意味著未來的全部,將推動理想汽車向一家人工智能公司演進。


不過,理想與英偉達不同。理想作為整車企業(yè),是AI技術的應用者;而英偉達作為科技企業(yè),是AI技術軟硬件兩個方面的締造者。


微信圖片_20250111192000.png


黃仁勛認為,AI的發(fā)展經歷了三個階段:初始階段是感知式AI,即理解圖像、文字和聲音;之后是生成式AI,可以創(chuàng)造文本、圖像和聲音;現在,我們正在進入物理AI的時代,即能夠運行、推理、計劃和行動的AI。這為包括自動駕駛汽車、游戲、機器人在內的多個行業(yè)帶來了突破性發(fā)展。


談到2025年的技術創(chuàng)新時,黃仁勛表示,未來所有的交通工具都會具備自動駕駛能力,或者至少能夠實現自動化操作。五年前,關于技術的成熟度我們還不確定。但現在可以非??隙ǎ瑐鞲衅骷夹g、計算機技術和軟件技術已經非常成熟,我們將能夠實現這一目標。


在黃仁勛公布的幾項英偉達實現的突破創(chuàng)新中,與自動駕駛汽車相關的主要包括兩個,一個是NVIDIA Cosmos平臺通過針對自動駕駛汽車的新模型和視頻數據處理管線推動物理AI發(fā)展;另一個,是使用NVIDIA DRIVE AGX車載計算平臺開發(fā)下一代智能汽車。


1月6日,英偉達宣布推出NVIDIA Cosmos,該平臺由先進的生成式世界基礎模型、高級 tokenizer、護欄和加速視頻處理管線組成。官方表示,它將推動自動駕駛汽車(AV)和機器人等物理AI系統的發(fā)展。


微信截圖_20250109112503.jpg


在 CES 主題演講中,黃仁勛介紹了Cosmos模型的用處,主要包括三點:


第一,視頻搜索和理解。開發(fā)者能夠從視頻數據中輕松找到特定的訓練場景,例如雪天、擁堵等。


第二,物理AI模型開發(fā)和評估。在基礎模型上構建自定義模型,使用Cosmos進行強化學習以改進模型,或者測試模型在特定仿真場景中的表現。


第三,預測與“多元宇宙”模擬。使用Cosmos和Omniverse生成AI模型所有未來可能實現的結果,以便幫助其選擇最佳和最準確的路徑。


為什么要打造Cosmos世界基礎模型?


首先,基礎模型是自動駕駛系統認知現實世界、與現實場景交互的基礎。


第二,是因為物理AI模型的開發(fā)成本很高,構建物理AI模型需要數PB(petabytes)的視頻數據以及數萬小時的計算來處理、整理和標記這些數據。


而Cosmos世界基礎模型使開發(fā)者能夠輕松生成大量基于物理學的逼真合成數據,以用于訓練和評估其現有的模型,他們還可以通過微調Cosmos WFM構建自定義模型。


這意味著Cosmos世界基礎模型的應用,一方面可以節(jié)省大量時間,提升研發(fā)效率;另一方可以明顯減少經濟成本的投入,有助于新技術的落地普及。


官方數據顯示,開發(fā)者能夠使用NVIDIA Blackwell平臺在14 天內處理、整理和標記2000萬小時的視頻。如果單純使用CPU,則需要3年以上。


英偉達全球副總裁Norm Marks表示:“物理AI模型的開發(fā)者需要獲取真實世界的數據集,并對其進行篩選、整理和準備,以便用于訓練。Cosmos 通過生成式 AI 加速了這一過程,使自動駕駛汽車和機器人領域的 AI 模型開發(fā)變得更智能、更快速、更精確?!?/p>


據悉,為了加速機器人和自動駕駛汽車行業(yè)的工作,Cosmos模型將以開放模型許可證的方式提供。開發(fā)者可以預覽首批模型,也可以從NVIDIA NGC目錄或Hugging Face下載整個系列的模型和微調框架。


目前,Cosmos的首批用戶包括Agile Robots、Agility、Figure AI、Galbot、Hillbot、Skild AI、Uber、小鵬汽車等機器人公司、共享出行公司以及汽車公司。


微信圖片_20250111191619.png


Uber首席執(zhí)行官Dara Khosrowshahi表示:“生成式AI將驅動未來的移動出行,而這需要豐富的數據和非常強大的算力。相信在英偉達的助力下,我們能夠幫助行業(yè)更快開發(fā)出安全、可擴展的自動駕駛解決方案。”


通過Cosmos世界基礎模型的推動,還強化了面向自動駕駛的三個關鍵計算平臺。其中,NVIDIA DGX平臺用于在數據中心訓練基于AI的堆棧;NVIDIA Omniverse平臺用于仿真和合成數據的生成;車載計算平臺 NVIDIA AGX用于處理實時傳感器數據以實現安全駕駛。


這三個專為特定用途打造的全棧平臺,共同實現了軟件開發(fā)的持續(xù)改進提升。


在擁有了這一系列的技術支持之后,NVIDIA DRIVE端到端自動駕駛汽車開發(fā)平臺已經成為自動駕駛技術研發(fā)領域的天花板級的平臺之一。


官方表示,NVIDIA DRIVE AGX Orin車載芯片和NVIDIA DRIVE AGX Thor集中式車載平臺的計算性能,可以滿足自動駕駛汽車對復雜環(huán)境感知和決策的需求。


而 NVIDIA DriveOS軟件平臺包含了構建、調試、分析和部署自動駕駛汽車和自動駕駛汽車應用程序所需的所有軟件、庫和工具,能夠令車企快速推進自動駕駛技術的研發(fā)與應用。 


NVIDIA DRIVE OS專為在基于DRIVE AGX的硬件上開發(fā)和部署自動駕駛汽車應用程序而設計,可以為安全關鍵型應用程序提供執(zhí)行環(huán)境,并提供安全啟動、安全服務、防火墻和OTA更新等服務。


1月6日,英偉達在CES 2025上宣布,豐田、Aurora 和大陸集團已加入合作伙伴行列,利用 NVIDIA 加速計算和 AI 開發(fā)構建乘用與商用車型。


微信圖片_20250107215251.png


其中,豐田將在NVIDIA DRIVE AGX Orin上構建其下一代車型,并進一步運行經過安全認證的NVIDIA DriveOS操作系統,新車型將提供具有功能安全保障的高級輔助駕駛功能。


而官宣采用NVIDIA DRIVE AGX平臺用于下一代高級駕駛輔助系統和自動駕駛汽車產品的品牌,還包括:比亞迪、捷豹路虎、理想汽車、Lucid、梅賽德斯-奔馳、蔚來、Nuro、Rivian、沃爾沃汽車、Waabi、Wayve、小米、極氪、Zoox 等。


英偉達的“朋友圈”正在進一步拓寬,這意味著其自動駕駛研發(fā)技術的價值也越來越顯著。


在安全方面,英偉達近期獲得了來自權威第三方的多項安全認證和評估證明。其中,TüV SüD授予NVIDIA汽車系統級芯片、平臺與軟件開發(fā)流程 ISO 21434 網絡安全認證,NVIDIA DriveOS 6.0也被認證為符合ISO 26262汽車安全完整性等級(ASIL)中最高的D級標準;TüV Rheinland對NVIDIA DRIVE自動駕駛汽車平臺進行了獨立的聯合國歐洲經濟委員會(UNECE)安全法規(guī)評估,該評估涉及復雜電子系統的安全要求。


NeoImage_副本.jpg

此外,NVIDIA推出的安全檢測實驗室也已獲得美國國家標準學會國家認可委員會(ANAB)的認證,該認證的安全檢測實驗室能夠為NVIDIA DRIVE生態(tài)系統合作伙伴進行功能安全和網絡安全檢測。


至此,英偉達成為首家獲得第三方對其汽車技術進行全面評估的平臺公司,包括NVIDIA DRIVE端到端自動駕駛平臺,涵蓋了系統級芯片、操作系統、傳感器架構、L2+ 應用軟件,同時獲得了汽車市場AI系統安全和網絡安全檢測實驗室的獨立認證。


微信圖片_20250107215229.jpg


隨著新技術的落地、安全認證的達成以及諸多整車制造商、自動駕駛車輛運營商的加入,NVIDIA DRIVE正在被全球汽車生態(tài)系統越來越廣泛地采用,英偉達在軟硬件兩個方面的技術價值也在更多地釋放出來。


剛剛過去的2024年,業(yè)界將其稱之為城區(qū)智駕的爆發(fā)之年;而剛剛開始的2025年,AI新技術的落地讓自動駕駛領域有了更多的想象空間。


從駕駛輔助到完全自動駕駛,這一迭代過程能在AI技術的推動下如何加速,英偉達正在給出答案。

x

收藏 6
打賞
相關標簽:
電話:010-65030507
郵箱:editor@autor.com.cn
地址:北京市朝陽區(qū)朝外大街乙6號朝外SOHO D座5097室
北京智駕時代傳媒科技有限公司          Copyright © 2014 - 2022
Autor.com.cn All Rights Reserved. 版權所有 AutoR智駕 智能汽車網
京ICP備14027737號-1      京公網安備 11010502038466號
電信與信息服務業(yè)務經營許可證:京B-20211307
關注官方微信