GTC 2025 首場大會接近尾聲時,NVIDIA 創辦人暨執行長黃仁勳以「小藍」為引,宣布推出全球首個開放式、可完全自訂的基礎模型 NVIDIA Isaac GR00T N1,提供通用人形機器人推理能力和技能。另外也發表了與 Google DeepMind 及 Disney Research 共同開發的開源物理引擎 Newton,正式宣告通用機器人的時代已經來臨。

NVIDIA 創辦人暨執行長黃仁勳宣布,「通用機器人的時代已經來臨。」而通用機器人所要解決的一大難題就是缺工問題,初步估計全球勞動力短缺人數超過 5,000 萬人,而 GR00T N1 是 NVIDIA 預先訓練並提供給全球機器人開發人員的完全可客製化模型系列中的第一款,可加速推動全球受勞動力短缺之苦的產業進行轉型。

GR00T N1 基礎模型採用雙系統架構,靈感來自於人類的認知原理。「系統 1」是快速思考的動作模型,反映人類的反射或直覺。「系統 2」是一個緩慢思考的模型,用於深思熟慮,做出有條理的決策。

在視覺語言模型的支援下,系統 2 會對身處的環境和收到的指令進行推理以規劃行動。然後系統 1 會將這些計畫轉換為機器人身上精確連續的動作。系統 1由人類示範的資料及 NVIDIA Omniverse 平台所產生的大量合成資料訓練而成。

GR00T N1 可以輕鬆用於處理一般任務,像是用一或兩隻手臂抓取、移動東西,以及將東西從一隻手臂換到另一隻手臂,或是執行需要長上下文與一般技能組合的多步驟任務。這些功能可以用在搬運材料、包裝和檢查等情況。開發人員和研究人員可針對特定的人形機器人或任務,使用真實或合成資料對 GR00T N1 進行後期訓練。

率先使用 GR00T N1 的人形機器人開發商有 Agility Robotics、Boston Dynamics、Mentee Robotics 和 NEURA Robotics,以及 1X。黃仁勳在 GTC 大會主題演講中,展示了 1X 的人形機器人利用建構在 GR00T N1 上的後期訓練手段,自主執行整理家務的工作。1X 與 NVIDIA 合作訓練 AI,讓這款機器人擁有自主能力。

此外,NVIDIA 宣布與 Google DeepMind 及 Disney Research 合作開發的開源物理引擎 Newton,可以讓機器人學習如何更高精準度處理複雜任務。

Newton採用 NVIDIA Warp 框架開發,將針對機器人學習進行最佳化,並且相容於 Google DeepMind 的 MuJoCo 和 NVIDIA Isaac Lab 等模擬框架。這三家公司還計畫讓 Newton 能夠使用迪士尼的物理引擎。

Google DeepMind 與 NVIDIA 正在合作開發 MuJoCo-Warp,預計可以將機器人機器學習工作負載加速 70 倍以上,並且將透過 Google DeepMind 的 MJX 開源函式庫及 Newton 提供給開發人員使用。

Disney Research 將成為首批使用 Newton 推動開發該單位機器人角色平台的公司之一,這個平台將用於驅動下一代娛樂用途機器人,例如於黃仁勳的 GTC 主題演講中與他一同登台、以《星際大戰》為靈感所開發出栩栩如生的 BDX 機器人。

Newton 物理引擎預計將於今年稍後推出。

以目前來說,大型、多樣化、高品質的資料集對開發機器人來說十分重要,NVIDIA 同步宣布推出用於產生合成操控動作的 NVIDIA Isaac GR00T Blueprint,就有助於解決這個難題。這個藍圖以 Omniverse 和 NVIDIA Cosmos Transfer 世界基礎模型為基礎,讓開發人員只要投入少數的真人示範資料,就能為操控任務產生海量合成動作資料。

NVIDIA 使用這個藍圖的第一批組件,在短短 11 個小時裡便產生出 78 萬個合成軌跡,這相當於 6500 個小時或連續9個月的真人示範資料。NVIDIA 接著將合成資料加上真實資料,相較於只使用真實資料,GR00T N1 的效能提高了 40%。

NVIDIA 將發布 GR00T N1 資料集,作為更大的開源實體 AI 資料集的一部分,以進一步為開發者社群提供寶貴的訓練資料。這份資料集也在 GTC 大會上公布,目前可在 Hugging Face 上取得。

NVIDIA GR00T N1 訓練資料和任務評估情境現在可從 Hugging Face 及 GitHub 下載。用於產生合成操作動作的 NVIDIA Isaac GR00T Blueprint,現在同樣能夠在 build.nvidia.com 上以互動展示的形式提供,或是從 GitHub 下載。

NVIDIA DGX Spark 個人 AI 超級電腦是 NVIDIA 攜手聯發科所共同開發,可成為開發人員提供一站式系統,可擴充 GR00T N1 的功能以用於新的機器人、任務和環境,無需自行撰寫大量程式,一組約台幣10萬元。

By 壹哥OneGeek1979

1979年出生於桃園, 2011年加入ETtoday新聞雲(Ettoday.net), 2019年創辦極熊仔,現為ETtoday新聞雲特約記者, 對新科技保持熱情,斜槓時尚包袋市場, 資訊爆炸時代,希望透過一點點趨勢觀點,為市場帶來更多正能量。

Leave ur Comment

探索更多來自 壹哥的科技生活 的內容

立即訂閱即可持續閱讀,還能取得所有封存文章。

Continue reading