在近日舉行的機器人學習大會（CoRL）上，NVIDIA展示了其在機器人與物理AI領域的全新突破，以加速計算能力和開源生態(tài)為核心，為全球開發(fā)者和研究機構(gòu)提供從仿真到現(xiàn)實的完整創(chuàng)新鏈。此次發(fā)布的技術(shù)涵蓋開源物理引擎 Newton、最新版本的機器人推理視覺語言動作模型 Isaac GR00T N1.6，以及全新 AI 基礎設施，，為機器人開發(fā)和物理AI研究提供了統(tǒng)一、可加速的計算平臺。
NVIDIA 今日在機器人學習大會（CoRL）上宣布，開源物理引擎 Newton 現(xiàn)已可以通過 NVIDIA Isaac? Lab 獲取，同時推出的還有用于機器人技能的開源推理視覺語言動作模型 NVIDIA Isaac GR00T N1.6，以及全新 AI 基礎設施。上述技術(shù)為開發(fā)者和研究人員提供了開源的機器人加速平臺，該平臺能夠加快迭代周期、統(tǒng)一測試標準、整合訓練與機器人端推理，并助力機器人安全可靠地將技能從仿真環(huán)境遷移到現(xiàn)實世界。
開源物理引擎 Newton 已發(fā)布測試版本，該物理引擎由 Google DeepMind、Disney Research 與 NVIDIA 聯(lián)合開發(fā)，基于 NVIDIA Warp 和 OpenUSD 框架構(gòu)建，現(xiàn)已開放使用。
憑借 Newton 靈活的設計，以及兼容多種物理求解器的能力，開發(fā)者現(xiàn)在可以對非常復雜的機器人動作進行仿真，例如在雪地或碎石路面行走、操控杯子和水果等，并且能夠成功地將這些動作部署到現(xiàn)實場景中。
最新發(fā)布的開源機器人基礎模型 NVIDIA Isaac GR00T N1.6也即將在 Hugging Face 平臺上線。這一模型將集成 NVIDIA Cosmos? Reason——一款專為物理 AI 打造的開源、可定制的推理視覺語言模型。作為機器人的“深度思考大腦”，Cosmos Reason 能夠利用已有知識、常識和物理原理，將模糊的指令轉(zhuǎn)化為逐步執(zhí)行的計劃，從而應對新場景并泛化到多種任務中去。
Cosmos Reason 的下載量已超過 100 萬次，目前在 Hugging Face 的物理推理模型排行榜上位居榜首。該模型還能夠篩選和標注大量真實及合成數(shù)據(jù)，用于模型訓練。Cosmos Reason 1 現(xiàn)已作為 NVIDIA NIM? 提供，NVIDIA NIM是一款易于使用的 AI 模型部署微服務。
NVIDIA 宣布了開源 Cosmos 世界基礎模型（WFM）的全新更新。該模型的下載量已超過 300 萬次，開發(fā)者可通過文本、圖像和視頻提示，生成多樣化數(shù)據(jù)，從而大規(guī)模加速物理 AI 模型的訓練。
基于 NVIDIA Omniverse? 構(gòu)建的開發(fā)者預覽版 NVIDIA Isaac Lab 2.3 新增了靈巧抓取工作流。該工作流通過自動化課程體系，在虛擬環(huán)境中對擁有多手指的機器人和機械臂進行訓練，從簡單任務開始，逐步提升難度。此工作流會調(diào)整重力、摩擦力、物體重量等參數(shù)，訓練機器人在不可預測的環(huán)境中也能掌握技能。
Boston Dynamics 的 Atlas 機器人借助這一工作流學習抓取技能，其操控能力得到了顯著提升。
包括 Agility Robotics、Boston Dynamics、Figure AI、Hexagon、Skild AI、Solomon 以及 Techman Robot 在內(nèi)的領先的機器人公司，已經(jīng)采用 NVIDIA Isaac 和 Omniverse 技術(shù)。
為了讓開發(fā)者充分利用這些先進的技術(shù)和軟件庫，NVIDIA 還推出了專為高要求工作負載設計的 AI 基礎設施，包括NVIDIA GB200 NVL72、NVIDIA RTX PRO? 服務器與NVIDIA Jetson Thor?。
作為加速計算平臺的領導者，NVIDIA正在以開源技術(shù)推動機器人和物理AI從實驗室研究走向現(xiàn)實應用。從 Newton 的高精度物理仿真，到 Isaac GR00T 的智能推理，再到全新的 Cosmos 世界基礎模型與 AI 基礎設施，NVIDIA 正在重塑機器人研發(fā)方式，加速這一技術(shù)從構(gòu)想到落地的全過程。隨著這些技術(shù)的落地，一個由智能機器驅(qū)動、人與機器人協(xié)作的物理AI新時代正加速到來。
