搜维尔科技:使用Manus数据手套捕捉多模态人体演示
基于上海人工智能实验室主导的EgoExplorer研究。

EgoExplorer旨在解决人形机器人学习中的一个核心挑战:捕捉人们在真实场景中如何协调全身运动和精细的手部操作。其可穿戴系统结合了第一人称视频、身体追踪和手套测量技术,能够记录人们在实验室、家庭和工业环境中的连续演示动作。Manus Metagloves Pro 手套则为这一捕捉流程提供了精细的手指关节运动数据。

使用Manus捕捉人类示威活动
研究人员将Manus Metagloves Pro手套与五个VIVE Ultimate Tracker追踪器和一个头戴式摄像头集成在一起。参与者在工作环境中佩戴该系统执行任务,使研究团队能够记录手指运动以及伴随操作的姿势和移动情况。
这款手套直接测量手指关节活动,提供了摄像头视野之外的手部运动数据。EgoExplorer将手套骨架映射到 SMPL-X 数字人体模型的手部,使记录的手指运动与重建的身体模型保持一致。EgoExplorer研究团队将Manus Metagloves Pro描述为“我们手部数据采集系统的基石”。

将示威活动转化为多模态数据
该流程将手部动作、重建的全身运动和第一人称视角视频同步到一个共享的30 Hz时间轴上。生成的数据集支持对视觉观察与人类行为之间关系的研究。
EgoExplorer展示了Manus数据手套手部动作捕捉如何通过记录详细的手指动作(作为连续人类演示的一部分)来为具身人工智能研究做出贡献,将手部操作与全身活动和视觉环境联系起来。
关于搜维尔科技
我们热衷于动作捕捉技术的研发与推广。我们热衷于推动技术发展,使其处于技术前沿甚至更前沿。在这个频道上,我们想分享我们基于动作捕捉技术的最新体验。搜维尔科技与Manus数据手套总部签署代理合作协议,成为其在中国大陆地区一级官方代理商。搜维尔科技现支持相关产品购买、咨询与售后支持等服务,欢迎垂询。
DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。
更多推荐




所有评论(0)