輝達(Nvidia)於 12 月 1 日在加州聖地牙哥的 NeurIPS AI 大會上宣布一系列新開放 AI 模型和工具,旨在加速自動駕駛和物理 AI 的研究。這次發布的重點是 Alpamayo-R1,這是一個專為自動駕駛研究設計的開放推理視覺語言模型,Nvidia 聲稱這是全球首個此類模型。
Alpamayo-R1結合了推理和路徑規劃的能力,能夠同時處理視覺和文本數據,使車輛能在複雜的駕駛場景中做出類似人類的細緻決策。該模型基於Nvidia的Cosmos Reason框架,該框架於今年1月首次推出,並隨後擴展了其他模型和數據集。
這個VLA模型使自動駕駛車輛能夠在面對挑戰性情況時進行推理,例如在行人密集的路口導航、應對車道封閉或處理雙排停車的情況。Alpamayo-R1旨在透過分析每個場景並考慮所有可能的路徑,賦予車輛達到四級自動駕駛所需的「常識」。
Nvidia已將Alpamayo-R1上傳至GitHub和Hugging Face等開源平台,以促進研究人員和開發者的廣泛採用和合作。除了模型外,Nvidia還發布了Cosmos Cookbook,這是一套全面的逐步指南、推理資源和後訓練工作流程,幫助開發者根據特定用例調整模型。
這些公告是Nvidia推進物理AI更大計畫的一部分,該計劃包括能感知和與現實世界互動的機器人和自動系統。Nvidia的聯合創始人兼首席執行長黃仁勳強調,下一波AI的浪潮是物理AI,該公司正在大力投資於支持這一轉變所需的基礎設施和工具。
此外,Nvidia還宣布與Synopsys建立戰略合作夥伴關係,旨在透過加速計算和數位孿生技術來革新工程和設計。這個合作將利用Nvidia的CUDA加速計算、代理AI和Omniverse數位孿生技術,以前所未有的速度和規模進行模擬。
這些新模型和工具現已向全球的研究人員和開發者開放,目標是推進自動駕駛和物理AI的發展。通過提供對這些尖端技術的開放訪問,Nvidia旨在促進行業內的創新和合作。
- Nvidia announces new open AI models and tools for autonomous driving research
- NVIDIA Advances Open AI Model Development
- NVIDIA Advances Open AI Models For Digital and Physical Applications
(首圖來源:輝達)






