NVIDIA 於 GTC 台北發表全方位實體 AI 平台:涵蓋人形機器人、自駕計程車與智慧工廠
NVIDIA 在 GTC 台北大會上發表 Cosmos 3 開放式基礎模型、Isaac GR00T 人形機器人參考設計,以及與台積電合作的半導體 AI 製造方案,全面布局實體 AI 生態系統,橫跨機器人、自駕車與工業自動化領域。

文章重點
- NVIDIA 於 GTC 台北發表 Cosmos 3,號稱全球首個完全開放的全模態基礎模型,支援文字、圖像、影片、音效與動作的理解與生成。
- Isaac GR00T 參考人形機器人整合 Unitree H2 Plus、Sharpa 靈巧手與 Jetson Thor,已獲 ETH Zurich、史丹佛等頂尖機構採用計畫。
- 台積電導入 NVIDIA CUDA-X 與 AI 模型,應用於運算微影、晶圓檢測及排程,雙方合作近 30 年。
- NVIDIA 推出 320 億參數推理模型 Alpamayo 2 Super,專為自駕計程車複雜路況決策設計。
- NVIDIA 同步釋出開源實體 AI 技能與代理工具,可自動化數據生成、模擬、訓練與部署流程。
NVIDIA 在 GTC 台北大會上揭示了一系列旨在加速實體 AI(Physical AI)系統發展的技術,將觸角進一步延伸至人形機器人、自駕車、半導體製造及工業自動化領域。
此次發表的核心產品包括:Cosmos 3 開放式實體 AI 基礎模型、基於 Isaac GR00T 平台打造的全新人形機器人參考設計、開源機器人與工業 AI 代理工具,以及與台積電(TSMC)合作推動的 AI 半導體製造計畫。
這些發表凸顯了 NVIDIA 建構實體 AI 全端(full-stack)生態系的策略,從合成數據生成、模擬環境到實際部署,無所不包。
NVIDIA 創辦人暨執行長黃仁勳表示:「拜多模態推理語言、視覺與世界模型的突破所賜,實體 AI 的大爆發即將到來。」
他進一步指出:「Cosmos 3 開放式前沿全模態模型(omnimodel)系列,為開發者在打造機器人、自駕車與視覺 AI 方面帶來跨世代的能力躍進,使其能夠感知、推理、規劃並在真實世界中行動。」
打造實體智慧核心
本次發表的核心是 Cosmos 3,NVIDIA 稱其為全球首個完全開放的全模態模型,能在單一系統中理解與生成文字、圖像、影片、環境音效及動作。
該模型採用混合 Transformer 架構(mixture-of-transformers),結合推理與內容生成能力。NVIDIA 表示,Cosmos 3 可作為視覺語言模型、用於模擬物理環境的世界模型,或機器人動作模型的基礎。
該公司聲稱,此模型在多項開放模型基準測試中,於世界生成、機器人動作策略及視覺理解等領域均名列前茅。Cosmos 3 提供多種版本,包括適用於高精度機器人與自駕車應用的 Cosmos 3 Super,以及針對更快推論速度設計的 Cosmos 3 Nano。
NVIDIA 同時推出了一系列開源實體 AI 技能與工具,讓 AI 代理能夠在機器人、視覺 AI、自動駕駛、醫療保健及工業數位孿生等領域執行任務。這些工具可將複雜的開發流程轉化為可重複、由代理自動執行的流程,實現數據生成、模擬、訓練和部署的自動化。
從實驗室到工廠
在機器人研究方面,NVIDIA 發表了 Isaac GR00T 參考人形機器人,這是一款開放式參考設計,整合了 Unitree H2 Plus 人形機器人、Sharpa 靈巧手、Jetson Thor 機載運算平台以及 Isaac GR00T 軟體堆疊。
該平台旨在透過將硬體、模擬、訓練與部署整合於單一系統中,簡化人形機器人的開發流程。包括 Ai2、蘇黎世聯邦理工學院(ETH Zurich)、史丹佛機器人中心(Stanford Robotics Center)及加州大學聖地牙哥分校(UC San Diego)等研究機構均計畫採用此平台。
NVIDIA 也透過與台積電的合作,將 AI 更深入地導入半導體製造。
台積電正使用 NVIDIA CUDA-X 函式庫和 AI 模型,應用於運算微影(computational lithography)、電晶體模擬、製程控制、晶圓檢測及晶圓廠排程等領域。據 NVIDIA 表示,台積電已在運算效率方面取得顯著提升,同時運用 NVIDIA Metropolis 和 TAO Toolkit 改善奈米級缺陷的偵測能力。
黃仁勳表示:「NVIDIA 與台積電攜手合作近三十年,不斷突破運算的極限。台積電正將 NVIDIA AI 和加速運算導入晶圓廠內部,以模擬、最佳化與 AI 技術來解決全球最複雜的設計與製造挑戰。」
NVIDIA 也透過 Alpamayo 2 Super 探索自駕車領域的實體 AI 應用。這是一款擁有 320 億參數的推理模型,專為協助自駕計程車(robotaxi)理解、規劃並應對複雜路況而設計。
原文來源: 查看原文
常見問題
Newsletter
訂閱低空產業電子報
每日精選低空經濟與無人機產業新聞,直送您的信箱。
本文由 LAETimes 編輯部審核發佈 ·


