在本周一的 SIGGRAPH 大會上,英偉達推出了一系列面向機器人開發者的全新世界 AI 模型、庫及其他基礎設施,其中最為引人注目的是 Cosmos Reason。這是一款擁有 70 億參數的“推理”視覺語言模型,專為物理 AI 應用和機器人設計。

除了 Cosmos Reason,現有的 Cosmos 世界模型系列還新增了 Cosmos Transfer-2。該模型能夠加速從 3D 模擬場景或空間控制輸入中生成合成數據,同時還有一個精簡版,在速度優化方面表現更為出色。
英偉達在發布會上強調,這些模型的主要用途是創建用于訓練機器人和 AI 智能體的合成文本、圖像和視頻數據集。Cosmos Reason 依托其記憶和對物理原理的理解,賦予機器人和 AI 智能體“推理”能力,使其能夠“作為規劃模型,推斷具身智能體接下來可能采取的步驟”。該公司表示,該模型可用于數據策劃、機器人規劃和視頻分析。

此外,英偉達還發布了新的神經重建庫,其中包含一種渲染技術,開發者可借此利用傳感器數據以 3D 形式模擬現實世界。這一渲染能力也被整合進了開源模擬器 CARLA,該平臺在開發者中廣受歡迎。同時,Omniverse 軟件開發工具包也迎來了更新。
在機器人工作流程方面,英偉達推出了新的服務器。Nvidia RTX Pro Blackwell Server 為機器人開發工作負載提供了單一架構,而 Nvidia DGX Cloud 則是一個基于云的管理平臺。
隨著半導體巨頭英偉達不斷深入機器人領域,這些新發布的產品標志著其在尋找 AI GPU 的下一個重大應用場景方面邁出了重要一步,超越了現有的 AI 數據中心應用。