NVIDIA_宣布_Cosmos_世界基礎模型及實體_AI_資料工具重大發布

ITMan!資訊新聞 PCDIY!業界新聞

NVIDIA_宣布_Cosmos_世界基礎模型及實體_AI_資料工具重大發布

文．圖／陳仁智 2025-03-21 13:01:19

● 全新模型可實現實體 AI 的預測、可控制的世界生成與推理
● 兩種全新的藍圖為機器人與自駕汽後期訓練提供大規模實體 AI 合成資料生成
● 1X、Agility Robotics、Figure AI、Skild AI 為早期採用者

美國聖荷西訊】NVIDIA 今日宣布推出全新的 NVIDIA Cosmos™ 世界基礎模型（WFM）的重大發布，為實體人工智慧（AI）開發引入開放且完全可客製化的推理模型，並提供開發人員對世界生成前所未有的控制權。

NVIDIA 還將推出兩種NVIDIA Omniverse 和 Cosmos 平台驅動的全新藍圖，為開發人員提供用於後期訓練機器人和自駕車的大量可控制合成資料生成引擎。

1X、 Agility Robotics、Figure AI、Foretellix、Skild AI 和 Uber 等產業領導者，均作為率先採用 Cosmos 的企業，為實體 AI 更快、大規模地生成更豐富的訓練資料。

NVIDIA 創辦人暨執行長黃仁勳表示：「正如大型語言模型徹底顛覆了生成式與代理 AI，Cosmos 世界基礎模型則是實體 AI 的重大進展。Cosmos 為實體 AI 引入了一個開放且完全可客製化的推理模型，並為機器人技術與實體產業的階躍發展開創機會。」

用於合成資料生成的 Cosmos Transfer

Cosmos Transfer WFM 擷取結構化影片輸入，例如分割圖、深度圖、光學雷射掃描、姿態估計圖和軌跡圖，以生成可控制的逼真影片輸出。

Cosmos Transfer 可精簡感知 AI 訓練，將在 Omniverse 中建立的 3D 模擬或地面事實轉換為逼真的影片，用於大規模、可控制的合成資料生成。

Agility Robotics 將是 Cosmos Transfer 和 Omniverse 的早期採用者，用於大規模合成資料生成，訓練機器人模型。

Agility Robotics 技術長 Pras Velagapudi 表示：「Cosmos 提供我們將逼真訓練資料擴展至超出我們在現實世界中收集的資料範圍的機會。我們很高興看到可以利用這個平台釋放新效能，同時充分利用我們已有的實際型模擬資料。」

用於自動駕駛汽車模擬的 NVIDIA Omniverse 藍圖利用 Cosmos Transfer 來擴大基於實體的感測器資料的變化。有了此藍圖，Foretellix 可針對各種駕駛資料集透過改變天氣和光線等條件來增強行為場景。Parallel Domain 也在利用此藍圖將類似的變化應用於感測器模擬。

用於合成操作動作生成的 NVIDIA GR00T藍圖結合 Omniverse 和 Cosmos Transfer以大規模生成各種資料集，並利用 OpenUSD 驅動的模擬技術，將資料收集與增強時間從數天縮短至數小時。

用於智慧世界生成的 Cosmos Predict

Cosmos Predict WFM 於 1月的 CES 展會發表，可以透過文字、圖像和影片等多模式輸入來生成虛擬世界狀態。全新的 Cosmos Predict 模型將實現多影格生成，在給定開始和結束輸入影像時預測中間動作或運動軌跡。這些模型專為後期訓練而打造，可利用 NVIDIA 開放提供的實體 AI 資料集進行自訂。

利用 NVIDIA Grace Blackwell NVL72 系統的推論運算能力及其大型 NVIDIA NVLink™ 網域，開發人員可實現即時世界生成。

1X 正在利用 Cosmos Predict 和 Cosmos Transfer 來訓練其全新的人形機器人 NEO Gamma。機器人大腦開發商 Skild AI 正在利用 Cosmos Transfer 增強機器人的合成資料集。此外，Nexar 和 Oxa 則正在利用 Cosmos Predict 推進自動駕駛系統。

用於實體 AI 的多模態推理

Cosmos Reason 是一款開放且完全可自訂的 WFM，具備時空感知技術，利用思維鏈推理來理解影片資料，並以自然語言預測人類踏入斑馬線或盒子從架子上掉落等互動結果。

開發人員可利用 Cosmos Reason 來改善實體 AI 資料註釋和管理、強化現有的世界基礎模型或建立新的視覺語言動作模型。他們還可以對 AI 進行後期訓練，建立高階規劃器，讓實體 AI 了解如何完成任務。

加速實體 AI 的資料管理與後期訓練

根據下游任務，開發人員可在 NVIDIA DGX™ Cloud 上使用原生 PyTorch指令碼或 NVIDIA NeMo™ 架構來對 Cosmos WFM 進行後期訓練。

Cosmos 開發人員還可以在 DGX Cloud 上使用 NVIDIA NeMo Curator，加速資料處理和管理。Linker Vision 和 Milestone Systems 正利用它來管理大量影片資料，訓練建置於 NVIDIA AI Blueprint 的視覺代理的大型視覺語言模型，用於影片搜尋和摘要。Virtual Incision 正在探索將其部署於未來的手術機器人，而 Uber 和 Waabi 則正在推進自駕車的開發。

推動負責任的 AI 與內容透明度

根據 NVIDIA 的可靠 AI 原則，NVIDIA 在所有 Cosmos WFM 上實施開放式護欄。此外，NVIDIA 正與 Google DeepMind 合作，將 SynthID 整合至浮水印，並協助識別 build.nvidia.com 上展示的 Cosmos WFM NVIDIA NIM™ 微服務的 AI 生成輸出。

上市時程
Cosmos WFMs 現已在 NVIDIA API 目錄中提供預覽，以及列於 Google Cloud 上的 Vertex AI Model Garden。 Cosmos Predict 和 Cosmos Transfer 現已在 Hugging Face 和 GitHub 上開放提供。 Cosmos Reason 已開放搶先體驗。

透過觀看 NVIDIA GTC 主題演講，以及報名參加 NVIDIA 和業界領袖在展會上的 Cosmos 演講和訓練，包括 NVIDIA 生成式 AI 研究副總裁劉洺堉的「Cosmos 世界基礎模型的介紹」。
→更多的【PCDIY!業界新聞】：請見

→更多的【PCDIY!賣場情報】：請見

→更多的【PCDIY!科技情報】：請見

→更多的【IT資訊新聞】：請見

→更多的【ITMan!資訊經理人】：請見

→更多的【PCDIY!八卦】：請見

延伸閱讀

資料很貴的！叫你備份不聽！你知道硬碟故障資料救援：「救個資料，報價『3萬8』嗎？」

「黑心電源供應器」大爆發！大家可要小心一點阿！太恐怖了啦!!!

什麼！硬碟大廠Seagate，最新的行銷活動廣告，裡面居然出現：「我也不想當『死雞』隊友啊.................」

電腦展的話，不少人是醉翁之意不在酒，不是去看電腦展，而是去看妹展的！到底看妹，是要怎麼看呢？

磁碟陣列要選RAID 5還是RAID 6？有需要再用Hot spare嗎？這是一個好問題！

硬碟世界最「狂」記錄：「威騰WD RE 3TB硬碟驚爆鬧機瘟，48顆就壞25顆，死亡率高達52.08%...................」

什麼終身保固？網友說：「覺得被騙了！」終身保固≠終身換新≠終生免費，你覺得呢？

淘寶網帶來的跨境電商價格戰，對光華商場來說，是新危機？還是新轉機？

珍惜生命，遠離(成為)工具人

這邊有批8核心16執行緒CPU好便宜啊!!!

硬碟故障資料救援，等了一年八個月...

隨著香港電訊、日本So-net寬頻上網業者，陸續提供10G光纖上網，讓玩家與專業用戶享受高速上網的極速快感。反觀我們台灣，中華電信HiNet還在供裝光世代500M/250M與光世代1G/600M，可以說：「人家都上太空，我們還在殺豬公!!!」

高雄建國電腦商場，周圍稱為建國電腦商圈、建國3C商圈，爆發了倒店潮。網友議論紛紛，有的玩家認為跟原價屋有關，認為原價屋是殺手，真的是這樣嗎？

這個店家，讓各地店員嗆不爽去台北買這句話，從此走入歷史！

批踢踢實業坊PTT，這幾天有個網友PO文：「[請益] 約200T的貯存方案(預算10W～20W)」

高科技竹筷來啦！

SSD熱賣，玩家的最終看法：「用過，就回不去了！」

DDR4記憶體金手指歪掉惹..................

中國來的「360安全衛士防毒軟體」，「360安全卫士」這次獲得教授認證了！教授認證的「神防毒軟體」，這到底是「教授級防毒軟體」，還是防毒軟體是「會叫的野獸？」

電腦機殼破萬，是在搞什麼東西呢？

硬碟容量那麼大，玩家與專業用戶都在存什麼東西呢？原來答案是：「硬碟就是要裝謎片阿不然要幹嘛！」

什麼？Windows XP作業系統，還有老玩家在用呀！沒錯，真的是令人驚呆了！而且，這些玩家，宣稱：「打死不退、寧死不屈」，堅信：「再戰十年」

更多焦點

發表您的看法: 請勿張貼任何涉及冒名、人身攻擊、情緒謾罵、或內容涉及非法的言論。; 請勿張貼任何帶有商業或宣傳、廣告用途的垃圾內容及連結。; 請勿侵犯個人隱私權，將他人資料公開張貼在留言版內。; 請勿重複留言（包括跨版重複留言）或發表與各文章主題無關的文章。; 請勿張貼涉及未經證實或明顯傷害個人名譽或企業形象聲譽的文章。; 您在留言版發表的內容需自負言論之法律責任，所有言論不代表PCDIY!雜誌立場，違反上述規定之留言，PCDIY!雜誌有權逕行刪除您的留言。

焦點