雖然蘋果與 Nvidia 在晶片業務上可能早已老死不相往來，但不代表 Nvidia 在其他產品方面不採用蘋果的技術。Nvidia 稍早釋出了一段影片，演示如何利用蘋果的 Vision Pro 來遠端控制人形機器人。
Nvidia 在新聞稿中指出，該公司正加速人形機器人的開發，其透過 Nvidia NIM 微服務、OSMO 機器人雲端運算編排服務、遠端操作資料擷取工作流程等，來訓練與建構下一代人形機器人的技術。
值得注意的是，Nvidia 的人形機器人開發人員在影片中使用的是蘋果的頭戴式顯示器 Vision Pro。一開始開發人員利用 Vision Pro 捕捉少量遠端操作演示，隨後在 Nvidia Isaac Sim 中模擬錄音，並使用 MimicGen NIM 微服務從錄音生成合成資料集。
開發人員使用真實與合成的資料來訓練 Project GR00T人形基礎模型，這可讓開發人員能夠節省時間並降低成本。之後再使用 Isaac Lab（機器人學習框架）中的 Robocasa NIM 微服務來產生資料，並重新訓練機器人模型。
整體工作流程中，Nvidia OSMO 將運算作業無縫分配給不同的資源，為開發人員節省了數週的管理任務。
（首圖來源：影片截圖）
科技新報粉絲團
加入好友
訂閱免費電子報
