NVIDIA 通過(guò)云端至機器人計算平臺驅動(dòng)人形機器人技術(shù),賦能物理 AI
全新 NVIDIA Isaac GR00T 人形機器人開(kāi)源模型即將登陸 Hugging Face
COMPUTEX —— 2025 年 5 月 19 日 ——NVIDIA 今日發(fā)布以下全新技術(shù):NVIDIA Isaac GR00T N1.5,這是 NVIDIA 首個(gè)開(kāi)源、通用且完全可定制的人形機器人推理與技能基礎模型的首次更新;用于合成運動(dòng)生成的 NVIDIA Isaac GR00T-Dreams Blueprint;以及用于加速人形機器人開(kāi)發(fā)的 NVIDIA Blackwell 系統。
包括 Agility Robotics、波士頓動(dòng)力、傅利葉、Foxlink、銀河通用、Mentee Robotics、NEURA Robotics、General Robotics、Skild AI 和小鵬機器人在內的多家人形機器人和機器人開(kāi)發(fā)商,正采用 NVIDIA Isaac™ 平臺技術(shù)推動(dòng)人形機器人的開(kāi)發(fā)與部署。
NVIDIA 創(chuàng )始人兼首席執行官黃仁勛表示:“物理 AI 與機器人技術(shù)將開(kāi)啟新一輪工業(yè)革命。從機器人的 AI 大腦到用于訓練的仿真環(huán)境,再到訓練基礎模型的 AI 超級計算機,NVIDIA 為機器人開(kāi)發(fā)的每個(gè)環(huán)節提供核心技術(shù)支持。”
全新 Isaac GR00T 數據生成 Blueprint 填補數據鴻溝
黃仁勛在 COMPUTEX 主題演講中展示的 NVIDIA Isaac GR00T-Dreams,為開(kāi)發(fā)者提供生成海量合成運動(dòng)數據(即神經(jīng)軌跡)的解決方案。物理 AI開(kāi)發(fā)者可利用這些數據訓練機器人適應動(dòng)態(tài)環(huán)境等新行為的能力。
開(kāi)發(fā)者可首先針對其機器人對 Cosmos Predict 世界基礎模型(WFM)進(jìn)行后訓練。隨后,GR00T-Dreams 僅需單張圖像作為輸入,即可生成機器人在新環(huán)境中執行新任務(wù)的視頻。該Blueprint 隨后提取動(dòng)作 tokens(經(jīng)壓縮且易于處理的數據片段),用于教會(huì )機器人如何執行這些新任務(wù)。
GR00T-Dreams Blueprint 是對今年三月 GTC 大會(huì )發(fā)布的 Isaac GR00T-Mimic Blueprint的補充。GR00T-Mimic 使用 NVIDIA Omniverse™ 和 NVIDIA Cosmos™ 平臺增強現有數據,而 GR00T-Dreams 則使用 Cosmos 生成全新數據。
全新 Isaac GR00T 模型推動(dòng)人形機器人開(kāi)發(fā)
NVIDIA 研究院借助 GR00T-Dreams Blueprint 生成合成訓練數據,僅用 36 小時(shí)就完成了 GR00T N1.5 模型的開(kāi)發(fā)(基于 GR00T N1 更新)。相比之下,如果采用人工數據收集的方式,這一過(guò)程需耗時(shí)近三個(gè)月。
GR00T N1.5 展現出更強的環(huán)境適應性與工作空間配置調整能力,并可通過(guò)用戶(hù)指令識別目標物體。此次更新大幅提升了模型在工業(yè)物料分揀、存放等常見(jiàn)制造場(chǎng)景中的任務(wù)成功率。
當前,AeiRobot、Foxlink、光輪智能與 NEURA Robotics 等企業(yè)已率先采用 GR00T N 系列模型。AeiRobot 利用該模型使 ALICE4 機器人能夠理解自然語(yǔ)言指令,執行工業(yè)場(chǎng)景中的復雜抓取與放置工作流。Foxlink 借助該模型提升工業(yè)機械臂的靈活性與作業(yè)效率。光輪智能通過(guò)模型驗證合成數據,加速工廠(chǎng)場(chǎng)景人形機器人部署。NEURA Robotics 正評估模型性能,以加速家庭自動(dòng)化系統的開(kāi)發(fā)進(jìn)程。
全新機器人仿真與數據生成框架加速訓練流程
開(kāi)發(fā)高技能人形機器人需要海量多樣化數據支撐,但真實(shí)數據采集與處理成本高昂,且機器人需要在物理世界中進(jìn)行測試,這也可能帶來(lái)成本和風(fēng)險。
為幫助填補數據和測試缺口,NVIDIA 推出以下仿真技術(shù):
NVIDIA Cosmos Reason:全新世界基礎模型(WFM),運用思維鏈推理技術(shù),為物理 AI模型訓練生成準確、高質(zhì)量的合成數據,現已在 Hugging Face 平臺開(kāi)放。
Cosmos Predict 2:用于 GR00T-Dreams,即將登陸 Hugging Face。有助于顯著(zhù)提升虛擬世界生成質(zhì)量,減少模型幻覺(jué)現象。
NVIDIA Isaac GR00T-Mimic Blueprint:僅需少量人類(lèi)示范動(dòng)作,即可生成指數級規模的機器人操作合成運動(dòng)軌跡。
開(kāi)源物理 AI 數據集:包含用于開(kāi)發(fā) GR00T N 模型的24,000 條高質(zhì)量人形機器人運動(dòng)軌跡數據。
NVIDIA Isaac Sim™ 5.0:機器人仿真與合成數據生成框架,即將在 GitHub 上以開(kāi)源形式提供。
NVIDIA Isaac Lab 2.2:開(kāi)源機器人學(xué)習框架,將支持新的評估環(huán)境,以幫助開(kāi)發(fā)者測試 GR00T N 模型性能。
Foxconn 與 Foxlink 正在使用 GR00T-Mimic Blueprint 加速其合成運動(dòng)操作生成,優(yōu)化工業(yè)機器人訓練流程。Agility Robotics、波士頓動(dòng)力、傅利葉、Mentee Robotics、NEURA Robotics、小鵬機器人等正通過(guò) NVIDIA Isaac Sim 與 Isaac Lab 推進(jìn)人形機器人仿真訓練。Skild AI 運用仿真框架開(kāi)發(fā)通用機器人智能系統,General Robotics 則將其集成到自身的機器人智能平臺。
開(kāi)發(fā)者可將其機器人基礎模型部署至即將推出的 NVIDIA Jetson Thor 平臺,這一平臺有助于實(shí)現機器人端推理與運行時(shí)性能的加速。
最后,記得關(guān)注微信公眾號:鎂客網(wǎng)(im2maker),更多干貨在等你!
硬科技產(chǎn)業(yè)媒體
關(guān)注技術(shù)驅動(dòng)創(chuàng )新
