人形机器人：NVIDIA 利用扩展现实、人工智能和全宇宙（元宇宙）加速人形机器人的开发

Konrad Wolfenstein

两年前

人形机器人：NVIDIA 利用扩展现实、人工智能和全宇宙（元宇宙）加速人形机器人的开发——图片来源：Xpert.Digital

🤖⚙️ 英伟达与人形机器人的未来：增强现实和人工智能的最新进展

🕶️🌐 扩展现实 (XR) 和人工智能 (AI) 的技术进步令人瞩目，影响深远。NVIDIA 就是这一发展的绝佳例证。NVIDIA 是一家以显卡闻名的公司，如今也已成为机器人领域的先驱。NVIDIA 正利用 XR、AI 和元宇宙 (Omniverse) 来加速人形机器人的研发，并树立新的行业标准。.

🍏✨ Apple Vision Pro 对 XR 发展的影响

尽管苹果 Vision Pro 的发布引发了人们对其商业成功前景的担忧，但它无疑加速了 XR（扩展现实）应用的发展。XR、增强现实 (AR) 和混合现实 (MR) 多年来一直是热门话题，但人们期待的突破性进展尚未出现。然而，这并不意味着 XR 的概念已经失败。恰恰相反，众多前景广阔的应用案例和发展方向正指引着我们走向 XR 技术的未来。.

🤖🕶️ NVIDIA 和使用 XR 控制机器人

英伟达利用 Apple Vision Pro 控制机器人 – 图片：英伟达

最近一个引人入胜的例子是英伟达发布的一段视频，演示了如何使用 Apple Vision Pro 控制机器人。在这个场景中，一个人在厨房里，通过 Vision Pro 眼镜切换到机器人的视角来控制它。眼镜捕捉到的手部动作会被传输到机器人，从而实现远程控制。这使得诸如用人控制机器人烤面包并涂上蜂蜜之类的应用成为可能。.

这项技术意义深远，尤其是在可能危及人身安全的场所，例如有倒塌风险的建筑物或其他危险环境。不难想象，这项技术可以应用于救援任务或炸弹处理。.

🌟更多内容请见下文最后一节

开发人员可以访问用于 Isaac Lab 和 Isaac Sim 中机器人仿真的全新 NVIDIA NIM 微服务、“OSMO 机器人云计算编排服务”、“远程操作数据采集工作流”等等。.

📊🛠️ 人形机器人数据采集与仿真技术的进步

开发人形机器人面临的最大挑战之一是训练基础模型所需的数据量巨大。为了简化和加速这一过程，NVIDIA 开发了一系列工作流程，能够通过少量远程操作演示生成大量数据。这些数据随后被用于 NVIDIA Isaac Sim 等仿真环境中，以创建合成数据集并进一步训练模型。.

这种创新方法也体现在MimicGen NIM微服务的使用上，该微服务可以生成合成的运动和感知数据。这不仅节省了时间，还显著降低了成本，因为所需的真实世界演示数据减少了。.

🧠⚙️人工智能在机器人领域的作用

“人工智能的下一波浪潮将是机器人技术，而人形机器人则是其中最令人兴奋的发展之一，”英伟达创始人兼首席执行官黄仁勋表示。这一愿景驱动着英伟达不断开发其平台和技术，致力于让全球用户都能使用人形机器人。通过提供人工智能模型、仿真工具和计算资源，英伟达正在助力加速人形机器人的研发。.

🧩🤝 合作与发展机会

NVIDIA 推出了人形机器人开发者计划，旨在让开发者提前体验新的工具和平台。波士顿动力公司和 Fourier 等公司是首批受益于该计划的企业。该计划的目标是与合作伙伴共同利用最新技术，推动整个机器人行业的发展。这些合作将缩短开发周期，加快机器人产品上市速度。.

🚀🌟 人形机器人的未来

机器人技术和人工智能的进步令人瞩目，为类人机器人的应用开辟了新的可能性。NVIDIA 在这一发展过程中扮演着核心角色，它打造了强大的工具和平台，能够更高效地训练和部署类人机器人。增强现实（AR）、人工智能（AI）和先进仿真工具的结合，正在彻底改变这些机器人的开发和控制方式。.

展望未来，我们非常期待看到这些技术的发展以及人形机器人将在哪些新领域得到应用。潜在应用范围涵盖工业自动化、医疗辅助、救援任务等等。NVIDIA 正引领潮流，其创新成果证明，将增强现实 (AR) 和人工智能 (AI) 集成到机器人技术中不仅可行，而且前景广阔。该领域的发展或许很快就能从根本上改变我们的日常生活。.

📣 类似话题

🤖 NVIDIA 与人形机器人革命：XR 与 AI 的和谐共存
🔧 NVIDIA 的人形机器人优化工具：进展与创新
🌐 Apple Vision Pro 在人机交互中的作用
🚀 NVIDIA 利用人工智能和仿真技术加速人形机器人技术
🚁 危险环境中的人形机器人：潜力和应用
👾 参与人形机器人开发者计划：NVIDIA 及其合作伙伴
🏭 人形机器人的工业应用：自动化新时代
🍏 Apple Vision Pro 对 AR 和机器人技术的影响
🔭 人形机器人的未来：应用与发展
🌐 NVIDIA 带我们进入全能宇宙：元宇宙中的人形机器人

#️⃣ 标签：#NVIDIA #人形机器人 #人工智能 #增强现实 #机器人开发

🗒️ Xpert.Digital：扩展现实和增强现实领域的先驱

寻找合适的元宇宙机构、策划公司或咨询公司 - 图片来源：Xpert.Digital

🗒️ 寻找合适的元宇宙机构、策划公司或咨询公司——反复搜索：咨询与策划十大技巧

更多信息请点击这里：

元宇宙和扩展现实领域的专家：找到合适的合作伙伴

🎯🎯🎯 Xpert.Digital 提供五大领域的综合服务，助您轻松实现目标 | 业务拓展、研发、体验式研究、公关及数字曝光优化

利用 Xpert.Digital 五大领域的专业知识，享受全面的服务套餐 | 研发、XR、公关和数字曝光优化 - 图片：Xpert.Digital

Xpert.Digital 拥有跨行业的深厚知识。这使我们能够制定量身定制的策略，精准契合您特定细分市场的需求和挑战。通过持续分析市场趋势和监测行业发展动态，我们能够积极主动地提供创新解决方案。丰富的经验和专业的知识相结合，能够创造附加值，并为我们的客户带来决定性的竞争优势。.

更多信息请点击这里：

只需每月 500 欧元起，即可享受 Xpert.Digital 五大专业领域的服务。

🤖🌍 英伟达正在加速开发面向全球未来的类人机器人

🚀🧠 人形机器人：NVIDIA 发布面向下一代人工智能浪潮的新技术和平台

为了加速全球人形机器人的发展，NVIDIA 为机器人制造商、人工智能模型开发商和软件制造商提供一系列服务、模型和计算平台，以设计、训练和构建下一代人形机器人。.

这些产品包括用于机器人仿真和学习的全新 NVIDIA NIM™ 微服务和框架、用于运行多阶段机器人工作负载的 NVIDIA Orchestration Service，以及 AI 和仿真辅助的远程操作工作流程，使开发人员能够利用少量人类演示数据来训练机器人。.

“人工智能的下一波浪潮是机器人技术，而最令人兴奋的发展之一就是人形机器人，”英伟达创始人兼首席执行官黄仁勋表示。“我们正在推进整个英伟达机器人技术栈的发展，并向全球人形机器人开发者和公司开放平台、加速库和人工智能模型，以便他们能够根据自身需求选择最合适的方案。”

🚀借助NVIDIA NIM和OSMO加速开发

NIM 微服务提供由 NVIDIA 推理软件驱动的预构建容器，使开发人员能够将部署时间从数周缩短至数分钟。两项全新的 AI 微服务使机器人专家能够增强 NVIDIA Isaac Sim™（一款基于 NVIDIA Omniverse™ 平台的机器人仿真参考应用程序）中生成式物理 AI 的仿真工作流程。.

MimicGen NIM 微服务基于从 Apple Vision Pro 等空间计算设备记录的远程操作数据生成合成运动数据。Robocasa NIM 微服务在 OpenUSD（一个用于在 3D 世界中进行开发和协作的通用框架）中生成机器人任务和可用于仿真的环境。.

NVIDIA OSMO 现已推出，它是一项云原生托管服务，使用户能够跨分布式计算资源（无论是在本地还是在云端）协调和扩展复杂的机器人开发工作流程。.

OSMO显著简化了机器人训练和仿真工作流程，将部署和开发周期从数月缩短到不到一周。用户可以可视化和管理各种任务，例如生成合成数据、训练模型、执行强化学习，以及大规模地对人形机器人、自主移动机器人和工业机械臂实施软件在环测试。.

🤖 人形机器人开发人员数据采集工作流程的进展

训练人形机器人的基础模型需要海量数据。收集人类演示数据的一种方法是通过远程操作，但这正变得越来越昂贵和耗时。.

在 SIGGRAPH 计算机图形学大会上，NVIDIA AI 和 Omniverse 支持的远程操作参考工作流程进行了演示，使研究人员和 AI 开发人员能够通过最少数量的远程拍摄演示生成大量的合成运动和感知数据。.

首先，开发者使用 Apple Vision Pro 录制少量远程操作演示。然后，他们在 NVIDIA Isaac Sim 中模拟这些录制内容，并使用 MimicGen NIM 微服务从录制内容生成合成数据集。.

开发者使用真实数据和合成数据训练 Project GR00T 人形机器人基础模型，从而节省时间和成本。然后，他们使用 Isaac Lab（一个机器人学习框架）中的 Robocasa NIM 微服务来生成用于重新训练机器人模型的实验数据。在整个工作流程中，NVIDIA OSMO 会将计算任务无缝分配给各种资源，从而为开发者节省数周的管理工作。.

Fourier 是一家专门从事通用机器人平台的公司，它看到了使用仿真技术合成生成训练数据的好处。.

Fourier首席执行官Alex Gu表示：“开发人形机器人极其复杂——它需要海量的真实世界数据，这些数据需要在现实世界中精心收集。NVIDIA全新的仿真和生成式AI开发工具将有助于加速和简化我们的模型开发工作流程。”

🌐 扩大人形机器人开发者对 NVIDIA 技术的访问范围

NVIDIA 提供三大计算平台，助力人形机器人开发：NVIDIA AI 超级计算机用于训练模型；基于 Omniverse 的 NVIDIA Isaac Sim，机器人可在模拟世界中学习和提升技能；以及 NVIDIA Jetson™ Thor 人形机器人计算机用于运行模型。开发者可根据自身需求，访问并使用全部或部分平台。.

通过 NVIDIA 推出的全新人形机器人开发者计划，开发者可以提前体验新产品，以及最新版本的 NVIDIA Isaac Sim、NVIDIA Isaac Lab、Jetson Thor 和 Project GR00T 通用人形机器人基础模型。.

1x、Boston Dynamics、ByteDance Research、Field AI、Figure、Fourier、Galbot、LimX Dynamics、Mentee、Neura Robotics、RobotEra 和 Skild AI 等公司是首批加入 Early Access 计划的公司。.

“波士顿动力公司和英伟达长期以来一直保持着紧密的合作关系，共同拓展机器人技术的边界，”波士顿动力公司首席技术官亚伦·桑德斯表示，“我们很高兴看到双方的合作成果推动着行业向前发展，而早期体验计划正是获取世界一流技术的绝佳途径。”

📅 供货情况

开发者现在可以加入 NVIDIA 人形机器人开发者计划，访问 NVIDIA OSMO 和 Isaac Lab，并将很快获得 NVIDIA NIM 微服务的访问权限。.

观看黄仁勋在 SIGGRAPH（领先的计算机图形学会议）上的炉边谈话，了解更多关于生成式人工智能和加速计算的最新进展。SIGGRAPH 将于 8 月 1 日在丹佛举行。.

开发者可以通过参加 SIGGRAPH 的最新会议和演讲，了解生成式人工智能和加速计算领域的最新进展。该会议为他们提供了直接向包括 NVIDIA 在内的行业领袖学习的机会，并让他们能够掌握最新的创新成果和技术。.

🤝 参与 NVIDIA 人形机器人开发者计划

对于致力于人形机器人持续开发和优化的开发者而言，NVIDIA 人形机器人开发者计划提供了独特的优势。通过提前使用最新的工具和平台，开发者可以显著缩短开发时间，更快地将项目推向市场。该计划旨在促进 NVIDIA 与开发者之间的紧密合作，确保所开发的解决方案符合最高标准，并充分利用最新的技术进步。.

🔧 NVIDIA 提供这些尖端技术

NVIDIA 通过推出先进的工具和平台，持续拓展并加速人形机器人的研发。借助全新的 NIM 微服务、OSMO 编排服务以及创新的数据采集工作流程，开发者拥有了进一步突破机器人技术边界所需的资源。NVIDIA 提供这些前沿技术，助力全球开发者打造更强大、更智能的人形机器人，并应用于广泛的领域。NVIDIA 对该行业的持续投入以及与行业领先企业的合作，充分体现了其对该行业的坚定承诺。.

希望引领这场技术革命的开发者们，我们诚邀您加入 NVIDIA 人形机器人开发者计划，使用最新工具，并成为人形机器人领域先驱者社区的一员。通过 NVIDIA 的资源和支持，您可以提升创新能力，推动机器人技术的革新。.