拜读维拉科技关于机器人相关信息的综合整理,涵盖企业排名、产品类型及资本市场动态:一、中国十大机器人公司(综合类)优必选UBTECH)聚焦人工智能与人形机器人研发,产品覆盖教育、娱乐及服务领域,技术处于行业前沿。NVIDIA Isaac GR00T与Apple Vision Pro携手探索人形机器人训练新途径机器人中科院旗下企业,工业机器人全品类覆盖,是国产智能工厂解决方案的核心供应商。埃斯顿自动化国产工业机器人龙头,实现控制器、伺服系统、本体一体化自研,加速替代外资品牌。遨博机器人(AUBO)协作机器人领域领先者,主打轻量化设计,适用于3C装配、教育等柔性场景。埃夫特智能国产工业机器人上市第一股,与意大利COMAU深度合作,产品稳定性突出。二、细分领域机器人产品智能陪伴机器人Gowild公子小白:情感社交机器人,主打家庭陪伴功能。CANBOT爱乐优:专注0-12岁儿童心智发育型亲子机器人。仿真人机器人目前市场以服务型机器人为主,如家庭保姆机器人(售价10万-16万区间),但高仿真人形机器人仍处研发阶段。水下机器人工业级产品多用于深海探测、管道巡检,消费级产品尚未普及。NVIDIA Isaac GR00T与Apple Vision Pro携手探索人形机器人训练新途径资本市场动态机器人概念股龙头双林股份:特斯拉Optimus关节模组核心供应商,订单排至2026年。中大力德:国产减速器龙头,谐波减速器市占率30%。金力永磁:稀土永磁材料供应商,受益于机器人电机需求增长。行业趋势2025年人形机器人赛道融资活跃,但面临商业化落地争议,头部企业加速并购整合。四、其他相关机器人视频资源:可通过专业科技平台或企业官网(如优必选、新松)获取技术演示与应用案例。价格区间:服务型机器人(如保姆机器人)普遍在10万-16万元,男性机器人13万售价属高端定制产品。
通用人形旨在快速适应现有的以人类为的城市和工业工作空间,处理繁琐、重复或体力要求高的任务。这些移动机器人经过设计,能在以人类为中心的环境中有出色的表现,从工厂车间到医疗保健机构,它们的价值日益凸显。
模仿学习是机器人学习的一个子集,它能让人形机器人通过观察和模仿人类专家的示范来获取新技能。在真实世界中收集这些广泛、高质量的数据集既繁琐又耗时,而且成本往往高得令人却步。从物理精确的环境中生成的合成数据有助于加快这一收集过程。
NVIDIA Isa GR00T为人形机器人提供机器人基础模型、数据管线和仿真框架,有助于应对人形机器人开发中所面对的这些挑战。用于合成运动生成的NVIDIA Isaac GR00T Blueprint是一个用于模仿学习的仿真工作流程,使开发者能够从少量人类示范中生成数量呈指数级扩增的数据集。
1.借助 NVIDIA Isaac GR00T 简化数据收集
在本文中,我们将介绍如何通过 Apple Vision Pro 捕捉远程操作数据,使用 NVIDIA Isaac GR00T 从少数人类示范中生成大量合成轨迹数据集,然后在Isaac Lab中训练机器人运动策略模型。
合成运动生成
该工作流的包括以下关键组成部分:
GR00T-leop:
NVIDIA CloudXR:连接到 Apple Vision Pro 头戴设备,使用专门为人形机器人远程操作设计的定制 CloudXR 运行时,实现动作的流畅传输 。
Isaac XR Teleop:将远程操作数据流式传输到NVIDIA Isaac 或 Isaac Lab,作为 Apple Vision Pro 的参考应用程序。
Isaac Lab:基于 Isaac Sim 的 Isaac Lab 是一个用于机器人学习的开源模块化框架,使用这一框架,可以实现训练机器人策略。
GR00T-Mimic:通过少量人类示范生成大量合成运动轨迹数据。
GR00T-Gen:通过随机化场景中的背景、光照和其他变量来增加多样性,并通过NVIDIA Cosmos对生成的图像进行放大处理。(在本文中,我们不会详细介绍 GR00T-Gen。)
图 1.远程操作架构
合成运动生成管线是一个复杂的过程,旨在创建一个庞大且多样化的数据集来训练机器人。
它从数据收集开始,在这个过程中,将使用像 Apple Vision Pro 这样的高保真设备,在仿真环境中捕捉人类的动作和行为。Apple Vision Pro 将手部追踪数据传输到如 Isaac Lab 的仿真平台,同时仿真平台将机器人环境的沉浸式视图传输回该设备。这种设置使得机器人操作更加直观和互动,有助于收集高质量的远程操作数据。
图 2.准备好通过 Apple Vision Pro 进行远程操作的机器人
Isaac Lab 中的机器人仿真画面被传输到 Apple Vision Pro,让您能够可视化机器人的环境。通过移动手部,您可以直观地控制机器人执行各种任务。这种设置提供了沉浸式且互动的远程操作体验。
图 3.Isaac Lab 中的远程操作
使用 GR00T-Mimic 生成合成轨迹
数据收集后,下一步是合成轨迹生成。使用 Isaac GR00T-Mimic 从少量人类示范中推算出大量合成运动轨迹。
这个过程包括在示范中标记关键点,并使用插值法确保合成轨迹平滑且符合情境。然后对生成的数据进行评估和优化,以满足训练所需的标准。
在这个示例中,我们成功生成了 1,000 条合成轨迹。
a.机器人
拿起轮子
b.机器人将轮子
移到托盘
c.机器人将轮子
放到托盘上
图 4.在 Isaac Lab 中生成的一组合成轨迹
在 Isaac Lab 中使用模仿学习进行训练
最后,使用模仿学习技术,利用合成数据集对机器人进行训练。在这个阶段,会训练一个策略,比如 Robomimic 套件的循环高斯混合模型(GMM),以模仿合成数据中的动作。
训练在比如 Isaac Lab 这样的仿真环境中进行,并且通过多次试验来评估训练后的策略的性能。这个管线显著减少了开发和部署机器人系统所需的时间和资源,使其成为机器人领域的一个有价值的工具。
为了展示如何使用这些数据,我们训练了一台带有夹爪的 Franka 机器人,在 Isaac Lab 中执行堆叠任务。这个夹爪类似于人形机器人的“手”。
我们使用了来自 Robomimic 套件的带有循环 GMM 策略的行为克隆方法。该策略使用了两个隐藏维度为 400 的长短期记忆(LSTM)层。
网络的输入包括机器人末端执行器的位姿、夹爪状态以及相对物体的位姿,而输出是一个用于在 Isaac Lab 中驱动机器人的增量位姿动作。
使用由 1,000 次成功示范组成的数据集,并经过 2,000 次迭代,我们实现了大约 50 次迭代 / 秒的训练速度(相当于在 NVIDIA RTX 上大约 0.5 小时的训练时间)。在 50 次实验的平均结果中,训练策略在堆叠任务中的成功率为 84%。
图 5.在 Isaac Lab 中训练的夹爪
开始使用
在本文中,我们讨论了通过 NVIDIA Isaac GR00T 生成合成轨迹数据,加速推进人形机器人运动策略学习:
https://developer.nvidia.cn/isaac/gr00t
GR00T-Teleop 堆栈目前还处于仅限受邀用户访问的阶段。加入人形机器人开发者计划,以便在该堆栈进入测试版时获取使用权限:
https://developer.nvidia.com/humanoid-robot-prog
全部评论
留言在赶来的路上...
发表评论