焦點
NVIDIA 利用全新開放式模型與模擬函式庫,加速機器人技術研發
文.圖/張國華 2025-09-30 18:48:20● 由NVIDIA、Google DeepMind 和 Disney Research 共同開發的開源Newton 物理引擎現已在 NVIDIA Isaac Lab 推出,可協助研究人員與開發者打造功能更強且更具適應性的機器人。
● 全新 NVIDIA Isaac GR00T 開放式基礎模型,為機器人帶來類人推理能力,讓機器人運用既有知識與常識分解複雜的指示及執行任務。
● 全新 NVIDIA Cosmos 世界基礎模型可讓開發者生成各種資料,加速大規模訓練物理 AI 模型。
● 史丹佛大學、蘇黎世聯邦理工學院與新加坡國立大學等全球頂尖大學的研究人員,正運用 NVIDIA 加速運算與軟體推進機器人技術研究。
● Agility Robotics、Boston Dynamics、Disney Research、Figure AI、Franka Robotics、Hexagon、Skild AI、所羅門與達明機器人等各大機器人開發者,均採用 NVIDIA Isaac 與 Omniverse 技術。
NVIDIA 今日宣布,開源 Newton 物理引擎以及應用於機器人技能與全新 AI 基礎設施的開放式 NVIDIA Isaac GR00T N1.6 推理視覺語言動作模型,現已在 NVIDIA Isaac Lab 推出。這些技術共同為開發者與研究人員提供開放式、加速的機器人平台,可加速迭代、測試標準化、將訓練與機器人上推論統合,並協助機器人以安全可靠的方式,將技能從模擬環境轉移至現實世界。
NVIDIA Omniverse 與模擬技術副總裁 Rev Lebaredian 表示:「人形機器人是物理 AI 下一個前沿,必須具備在無法預測世界中推理、適應及安全行動的能力。透過這些最新更新,開發者現在有三部電腦可將研究中的機器人轉化為實際應用。Isaac GR00T能做為機器人的大腦、Newton 模擬機器人軀體,而 NVIDIA Omniverse 則為訓練環境。」
Newton 開創機器人技術物理模擬的全新標準
機器人在模擬環境中學習更加快速和安全,但人形機器人的關節、平衡與動作相當複雜,挑戰現今物理引擎的極限。全球逾 25 萬名機器人開發者需要準確的物理模擬能力,才能確保他們在模擬環境中指導機器人的技能,可以在現實世界中安全可靠的執行。NVIDIA 今日宣布推出 Newton 測試版。Newton是由 Linux Foundation 管理的開源 GPU 加速物理引擎,建置於 NVIDIA Warp 與 OpenUSD 框架上,由 Google DeepMind、Disney Research 與 NVIDIA 共同開發,現已開放使用。
Newton 設計靈活並可搭配不同類型的物理求解器,協助開發者模擬極其複雜的機器人動作,例如在雪地或礫石行走及拿放杯子與水果,並成功部署於現實世界。
Newton 的最新採用者包括蘇黎世聯邦理工學院 Robotic Systems Lab、慕尼黑工業大學與北京大學等知名研究實驗室與大學,以及機器人公司 Lightwheel 與模擬引擎公司 Style3D。
Cosmos Reason 為全新開放式 Isaac GR00T N1.6 模型改善機器人推理
人形機器人必須能理解模稜兩可的指示,並且因應大量前所未有的多樣化經驗,才能在物理世界執行各種類人任務。開放式 Isaac GR00T N1.6 機器人基礎模型的最新版本即將在 Hugging Face 推出。此版本將整合 NVIDIA Cosmos Reason 這款專為物理 AI 打造的開放式可自訂推理視覺語言模型。Cosmos Reason 做為機器人深度思考的大腦,運用既有知識、常識與物理學,將模糊的指示轉化為逐步計畫,可因應新情境並在執行多種任務時舉一反三。
Cosmos Reason 下載次數已突破 100 萬,目前高居 Hugging Face 物理推理排行榜之首,也可為模型訓練彙整大量真實資料與合成資料集並加以註釋。Cosmos Reason 1 現以簡單易用的NVIDIA NIM™微服務提供,可部署於 AI 模型。
Isaac GR00T N1.6 現在可以讓人形機器人同時移動及拿取物件,讓軀體和手臂可更自由完成艱難的任務,例如打開沉重的門。
開發者可運用 Hugging Face 上的開源 NVIDIA 物理 AI 資料集,對 Isaac GR00T N 模型進行後訓練。此資料集下載次數已突破 480 萬次,目前包含成千上萬種合成與現實世界軌跡。
AeiROBOT、Franka Robotics、LG Electronics、Lightwheel、Mentee Robotics、Neura Robotics、所羅門、達明機器人與 UCR 等機器人領域領導製造商,正在評估運用 Isaac GR00T N 模型打造通用型機器人。
用於物理 AI 開發的全新 Cosmos 世界基礎模型
NVIDIA 宣布推出開放式 Cosmos WFM (世界基礎模型) 的全新更新。此模型被下載超過300 萬次,可讓開發者生成各種資料,利用文字、影像與影片提示,加速大規模訓練機器人模型。● 即將推出的 Cosmos Predict 2.5將三種 Cosmos WFM 的強大功能結合至單一強大模型,降低複雜度、節省時間並大幅提高效率。它支援更長的影片生成時間,最長可製作 30 秒的影片,以及多重視角攝影機輸出,實現更豐富的世界模擬。
● 即將推出的 Cosmos Transfer 2.5 提供比前代模型更快也更高品質的結果,而且大小減少了 3.5 倍。它能從具備真實標註的 3D 模擬場景,以及深度、影像分割、邊緣資訊與高解析度地圖等用於空間控制輸入內容,生成逼真的合成資料。
指導機器人抓取的全新工作流程
指導機器人抓取物體是機器人技術領域數一數二的難挑戰。抓取的動作不單單是移動手臂,還包括將思緒轉化為精確動作 ,是一個機器人必須透過試錯中習得的技能。Isaac Lab 2.3 開發者預覽版中全新的靈巧抓取工作流程以 NVIDIA Omniverse 平台為建置基礎,運用自動化課程在虛擬世界訓練多指手臂機器人。它從簡單的任務開始,然後逐步提高複雜度。工作流程會調整重力、摩擦力與物體重量等層面,訓練機器人即使在無法預測的環境也能學習技能。
Boston Dynamics 的 Atlas 機器人運用這項工作流程學會抓取,大幅提升操作能力。
Agility Robotics、Boston Dynamics、Figure AI、Hexagon、Skild AI、所羅門與達明機器人各大機器人開發者,均採用 NVIDIA Isaac 與 Omniverse 技術。
在模擬環境中評估機器人習得的技能
幫助機器人掌握新技能,例如拿起杯子或在房間行走,是極其困難的過程,而且用物理機器人測試這些技能既緩慢又昂貴。以模擬環境的方式進行可讓機器人對照無數情境、任務與環境測試所學技能,解決這類問題。然而,即使是在模擬環境,開發者打造的測試也往往流於片段簡化,無法反映現實世界。機器人若在完美簡單的模擬環境學習找方向,面對現實世界的複雜度時註定失敗。
NVIDIA 與 Lightwheel 正共同開發 Isaac Lab - Arena,這款可擴充實驗與標準化測試用的開源政策評估框架,讓開發者不必從頭打造系統,就能在模擬環境執行大規模複雜的評估。這款框架近期即將推出。
全新 NVIDIA AI 基礎設施讓各種機器人工作負載能隨地執行
NVIDIA 發表為最高工作負載設計的 AI 基礎設施,讓開發者能充分利用這些先進的技術與軟體函式庫,其中包括:● NVIDIA GB200 NVL72:這個整合 36 顆 NVIDIA Grace CPU 與 72 顆 NVIDIA Blackwell GPU的機架規模系統,可加速複雜的推理與物理 AI 任務等AI 訓練與推論,廣受各大雲端供應商採用。
● NVIDIA RTX PRO 伺服器:提供適用於訓練、合成資料生成、機器人學習與模擬領域的各項機器人開發工作負載的單一架構。RTX PRO 伺服器已獲得 RAI Institute 採用。
● NVIDIA Jetson Thor :由Blackwell GPU驅動,可讓機器人執行多個 AI 工作流程,實現即時智慧互動與即時機器人上推論,對於高效能物理 AI 工作負載與人形機器人技術應用而言是一大突破。Jetson Thor 已獲得Figure AI、Galbot、Google DeepMind、Mentee Robotics、Meta、Skild AI 和宇樹科技等合作夥伴採用。
NVIDIA 推動機器人技術研究
GPU、模擬框架與 CUDA 加速函式庫等 NVIDIA 技術,獲得 CoRL 收錄的近半數論文引用,並受卡內基梅隆大學、華盛頓大學、蘇黎世聯邦理工學院與新加坡國立大學等頂尖研究實驗室與機構採用。此外,由 Stanford Vision and Learning Lab 推出的機器人學習標竿專案BEHAVIOR ,和由北京大學開發用於推動視覺型觸覺機器人技術的高效能模擬平台的Taccel,亦為本次CoRL 亮點。
歡迎在 CoRL 深入瞭解 NVIDIA 的機器人技術研究成果,大會將於 9 月 27 日至 10 月 2 日在首爾舉行。
→更多的【PCDIY!業界新聞】: 請見
→更多的【PCDIY!賣場情報】: 請見
→更多的【PCDIY!科技情報】: 請見
→更多的【IT資訊新聞】: 請見
→更多的【ITMan!資訊經理人】: 請見
→更多的【PCDIY!八卦】: 請見
延伸閱讀
(01)光華商場的新危機,淘寶網帶來的跨境電商價格戰!(02)48顆壞25顆》威騰WD RE 3TB硬碟驚爆鬧機瘟,WD3000FYYZ死機地雷硬碟故障率高到嚇人!
(03)高雄建國電腦商圈爆倒店潮,引爆網友熱議!
(04)Seagate硬碟廣告:我也不想當死雞隊友啊,引爆玩家熱議!
(05)PTT寫手門事件:電蝦板主發表不自殺聲明,引爆網友熱議!
(06)記憶體插上16GB有多爽,引爆網友熱議!
(07)英特爾Intel 10GbE網路卡X540T2,淘寶網水貨價格殺很大!
(08)SSD爆發連環關門潮,憶正Memoright驚傳財務危機疑似倒閉!
(09)幫組電腦到自己貼錢的經驗,引爆網友熱議!
(10)教授認證防毒軟體「360安全衛士」,引爆網友熱議!
(11)DDR4記憶體金手指歪掉惹,引爆網友熱議!
(12)原價屋的商業模式,引爆網友熱議!
(13)Intel CPU神保固,舊換新大升級引爆網友狂推聯強貨!
(14)日本寬頻網路10G光纖上網,引爆網友熱議!
(15)Windows XP再戰十年,引爆網友熱議!
(16)光華商場的下一步,全世界都在看!
(17)東芝TOSHIBA Harrier MG03ACA300 3TB企業級硬碟,中國水貨價格殺很大!
(18)洋垃圾神器,Xeon E5-2670實測開箱大作戰!
(19)硬碟故障資料救援,等了一年八個月...
(20)新一代玩家聖物,6700元買16核心32執行緒Xeon E5-2675 v3處理器!
(21)淘寶網洋垃圾再顯神威,1999元買到8核心16執行緒Xeon E5-2670神器級處理器!
(22)洋垃圾戰神,5999元買14核心28執行緒Xeon E5-2683v3神器級處理器!
(23)硬碟用SSD有多爽,引爆網友熱議!
(24)磁碟陣列要選RAID 5還是RAID 6 引爆網友熱議!
(25)電腦CPU沒三萬沒法玩這遊戲,引爆網友熱議!
(26)為什麼有人要推AMD CPU菜單,引爆網友熱議!
(27)200TB資料怎麼儲存,引爆網友熱議!
(28)硬碟故障資料救援報價3萬8 引爆網友熱議!
(29)NVIDIA顯示卡的品牌怎麼挑選 引爆網友熱議!
(30)高科技竹筷,對付笨重顯示卡的神兵利器!
(31)電腦機殼價格破萬 引爆網友熱議!
(32)be quiet!電源供應器爆假貨,引爆了鍵盤大戰!

- 發表您的看法
請勿張貼任何涉及冒名、人身攻擊、情緒謾罵、或內容涉及非法的言論。
請勿張貼任何帶有商業或宣傳、廣告用途的垃圾內容及連結。
請勿侵犯個人隱私權,將他人資料公開張貼在留言版內。
請勿重複留言(包括跨版重複留言)或發表與各文章主題無關的文章。
請勿張貼涉及未經證實或明顯傷害個人名譽或企業形象聲譽的文章。
您在留言版發表的內容需自負言論之法律責任,所有言論不代表PCDIY!雜誌立場,違反上述規定之留言,PCDIY!雜誌有權逕行刪除您的留言。
最近新增
- 「ASUS TUF Gaming T500 電競桌機」實測開箱,「機甲戰魂造型」軍規認證「GeForce RTX 5060 Ti 獨顯火力加持」暢玩遊戲小鋼炮主機!
- LG「AI 情感智慧」不只懂運算也懂你 技術創新結合社會關懷,LG引領AI新價值
- NVIDIA 利用全新開放式模型與模擬函式庫,加速機器人技術研發
- 台灣LG電子關懷花蓮災情 宣布捐贈100台洗衣機助災戶 並提供LG家電免費檢測及維修零件優惠支持
- Facebook 與 Messenger 正式在台推出青少年帳號 Meta 持續強化青少年網路安全 為家長與孩子共創安心數位環境
- Xiaomi 15T Series 震撼登台 徠卡 5x 潛望長焦定義高光新境界 小米迄今最強續航 x 6.83 吋沉浸大螢幕 x 無網通訊創新首秀 深化在地佈局 小米之家全台五店盛大開幕
- 搶先卡位!ROG Xbox Ally獨家聯名掌機預購 早鳥優惠雙重送 舊換新再享萬元回饋
- 全新SSR獵人「成鎰奐」降臨《我獨自升級: ARISE》
- 華擎科技推出 ASRock AMD Radeon RX 9070 XT MONSTER HUNTER WILDS EDITION 16GB聯名顯示卡
- 「亞馬遜全球開店新銳品牌加速器計畫」攜手北市府、IEAT與創投 助攻台灣品牌出海 參與計畫賣家跨足全球站點 計畫期間營收表現超同期亞馬遜新賣家
- 戴爾科技資料中心重大突破 助力企業打造更智慧、快速、安全的私有雲
- Lenovo Idea Tab Plus | Lenovo Idea Tab 輕薄登場 AI 全面升級智慧學習與娛樂體驗
最多人點閱
- GIGABYTE GeForce GTX 1070 Xtreme Gaming實測開箱,電競級顯示卡中的頂尖之作!
- Seagate IRONWOLF 10TB機械硬碟實測開箱,氦氣填充那嘶狼守護者NAS HDD
- AMD Radeon RX 480實測開箱,玩家級顯示卡重返榮耀!
- 「浦科特 PLEXTOR S2C 512GB SSD」實測開箱,超值型固態硬碟中的優質好貨!
- 洋垃圾神器,Xeon E5-2670實測開箱大作戰!
- MSI CORE FROZR L CPU散熱器實測開箱,微星電競產品再添新兵
- MSI GeForce GTX 1060 GAMING X 6G實測開箱,玩家級電競顯示卡中的神兵利器!
- ASUS ROG STRIX-GTX1080-O8G-GAMING開箱實測,旗艦三風扇電競顯示卡中的頂尖之作!
- MSI GeForce GTX 1080 GAMING X 8G實測開箱,史上最強大Pascal自製顯示卡全面來襲!
- 淘寶網洋垃圾再顯神威,1999元買到8核心16執行緒Xeon E5-2670神器級處理器!
- MSI GeForce GTX 1050 Ti GAMING X 4G實測開箱,中階電競顯示卡中的玩家精品!
- 微星MSI Aegis X-026TW快打旋風V同梱版實測開箱,VR電競桌機的頂尖之作!
