Nvidia 於週一在 SIGGRAPH 會議上推出了一系列針對機器人開發者的新世界級 AI 模型、庫及基礎設施,其中最引人注目的是 Cosmos Reason。這是一款擁有 70 億引數的「推理」視覺語言模型,專為物理 AI 應用和機器人設計。此外,Cosmos 系列還新增了 Cosmos Transfer-2,該模型能加速從 3D 模擬場景或空間控制輸入中生成合成資料,並提供了一個經過壓縮最佳化以提升速度的版本。Nvidia 表示,這些模型旨在用於建立合成文字、影象和影片資料集,以訓練機器人和 AI 代理。Cosmos Reason 利用其記憶和物理理解能力,使機器人能夠進行規劃,推斷具身代理接下來可能採取的步驟,適用於資料策展、機器人規劃和影片分析等領域。
Nvidia 同時展示了新的神經重建庫,其中包含一種渲染技術,允許開發者利用感測器資料在 3D 中模擬真實世界。此渲染功能已整合到開源模擬器 CARLA 中,並對 Omniverse 軟體開發套件進行了更新。在機器人工作流方面,Nvidia 推出了新的伺服器,包括專為機器人開發工作負載設計的單一架構 RTX Pro Blackwell 伺服器,以及基於雲端的管理平臺 Nvidia DGX Cloud。這些公告標誌著半導體巨頭進一步深入機器人領域,旨在探索其 AI GPU 在 AI 資料中心之外的下一個主要應用場景。