mHand Pro动捕数据手套在人形机器人领域的具体运用

广州虚拟动力
2024-12-12

mHand Pro动捕数据手套在人形机器人领域的具体运用


mHandPro是一款高精度的动作捕捉数据手套,可应用于动作捕捉与VR交互等领域,配套”mHand Studio“引擎,可实时捕捉真人手部位姿及运动轨迹数据,将数据导出还可以用于人形机器人的训练加速高精度机器人操作技能的培训进程。




高精度动作数据捕捉

mHand Pro通过自主研发的多层级AHRS异步融合算法,定制化设计了16位ADC ASIC,可以使得动捕数据在温度和时间层面上保持高稳定性,具备低噪声、高精度和偏移抵消的优点,可精准捕捉真人手部的每一个细微动作,例如手指弯曲程度、手掌朝向、手部移动速度等,通过大量的真人手部数据积累,可以优化机器人学习模型,助力机器人自主决策,自主执行任务,减少人为执行的错误并提高工作效率。

数据导出与映射

mHand Pro动捕数据手套搭配了mHand Studio驱动引擎,通过mHand Studio的数据与导出功能,可以将捕捉到的动作数据以BVH 、FBX、CSV的格式输出,将数据映射在远程控制设备上可以让机器人、机器臂、灵巧手实现高拟人化运动,通过动作的实时映射还可以实现高精度的远程操控,让用户像控制自己的手一样控制人形及关节机器人。同时通过手套上的震动反馈装置还可以使用户增强在虚拟环境中的沉浸式交互感,大大地提高了操作地精准性和真实感。



功能集成助力机器人训练

mHand Pro动捕数据手套可兼容Windows和Andriod系统,且配套LinuxSDK与丰富的数据接口,为用户带来了高度灵活性,用户可以通过这些工具进行二次开发与集成,构建定制化管道或开发个性化的集成方案,进行机器人的灵活训练。



拓展应用场景

VR游戏领域,mHandPro可实现精细化的动作模拟与操控,通过18种常用手势的识别功能加上与多种主流的 VR 设备和游戏平台的配合可以进行沉浸式的游戏交互。在教育培训领域,可应用于虚拟历史场景重现和科学实验模拟,学生可以在虚拟空间中进行化学实验、生物解剖、医学解剖等手部操作,通过虚拟训练,增强对于理论知识的理解,从而提高真实实验的成功率。在影视动画领域,通过mHand Studio的动作数据记录与导出功能,可以将所需的手部动画录制成动作数据再导入主流的动画软件进行动画制作,提高动画制作效率。



分享