搜维尔科技:利用MANUS数据手套为灵巧机器人提供动力

35 阅读3分钟

产品:

  • MANUS量子超手套
  • MANUS Core Xsens许可证

图片

背景

中国国家地方共建人形机器人创新中心推出了百湖数据中心,这是一个开源平台,提供高保真人体运动数据集,以加速人形机器人的发展。其旗舰产品青龙机器人是中国首款开源通用人形机器人。青龙机器人将于2024年发布,它将利用具身人工智能和协同标注技术,收集并展示技能习得数据。

挑战:稀缺的机器级运动数据

训练人形机器人需要海量的类人操作数据集。但最有价值的数据——精确标注的手部与物体交互数据——也是最难获取的:

  • 网络视频:数量众多,但缺乏注释。
  • 第一人称虚拟现实数据:更具相关性,但更难获取。
  • 真正的机器人级数据:最准确,但稀有且昂贵。

数据瓶颈减缓了实现具备人类般灵巧度的机器人的进程。

图片

MANUS解决方案:大规模精准手指追踪

为了克服数据瓶颈,中国首款开源人形机器人青龙将MANUS Quantum Metagloves与全身动作捕捉技术相结合。

  • 即使双手重叠或离开摄像头视野,也能实现精准、无漂移的手指追踪。
  • 手部与身体同步,使每一次伸展和抓握都能在骨骼上完美地同步进行。
  • 标准化的CSV导出功能,可立即用于大规模 AI 训练流程。

这些功能创造了具身人工智能所需的稀有、高质量数据集。

委托行动顺序

机器人通过将复杂任务分解成一个个带有标签的微动作来学习精细运动技能。以插入电源线为例,机器人需要执行一系列手部与物体的交互动作才能将电源线插入插座,这些动作包括抓取、对齐和插入。

这些微小的动作构成了一个丰富的手-物体交互数据集,可用于模仿和强化学习。

图片

从运动到灵巧

捕获并标记的微动作流经结构化的人工智能流程:

  1. 模仿学习,即机器人模仿人类动作。
  2. 控制理论优化过程中,会对时机和力进行微调。
  3. 强化学习使机器人能够通过尝试和奖励来改进。

这种分阶段的方法将运动数据转化为人类水平的灵巧性。

关于搜维尔科技我们热衷于动作捕捉技术的研发与推广。我们热衷于推动技术发展,使其处于技术前沿甚至更前沿。在这个频道上,我们想分享我们基于动作捕捉技术的最新体验。搜维尔科技与Manus总部签署代理合作协议,成为其在中国大陆地区的授权代理经销商。搜维尔科技现支持相关产品购买、咨询与售后支持等服务,欢迎垂询。