AS5600 编码器加 CoinFT 六维力与 DIGIT 视触觉:RUMI 匹配 Robotiq 2F-85 的多模态示教方案参数梳理
一、研究背景:力觉数据集稀缺
面向接触丰富的机器人操作,大规模、带接触力标注的示教数据长期稀缺。既有手持 UMI 多围绕平行夹爪设计,与工业自适应夹爪的非线性连杆力学不一致,接触瞬间也缺少可测量的力通道;脱离机器人采集时,轨迹是否满足目标臂工作空间也无法在线判断。
arXiv:2611.15802(2026-11-11 提交)的 RUMI 针对这三点给出硬件与流程方案,真机部署于 Franka FR3 + Robotiq 2F-85 + RealSense D405。

图1 RUMI 硬件与三种接触模式拆解
二、硬件链路:2F-85 匹配剪式连杆
RUMI 连杆几何、指尖接口与腕部视角取自 2F-85 官方 CAD;交叉剪式连杆耦合拇指与食指运动,AS5600 磁编码器读取夹爪开合度。后部输入垫承托于手背,食指侧装 CoinFT 六轴力/力矩传感器(200 Hz);指尖模块兼容 CoinFT、标准件与 DIGIT 视触觉传感器,可在手持接口与真机夹爪间互换。
三、传感与主控配置梳理
Teensy 4.0 同步编码器与 CoinFT 测量、USB 上传主机并控制阻挡器舵机;DIGIT 绕过主控直连主机。腕部 D405 以真机相同位姿安装;Meta Quest 3 控制器固连设备提供六自由度定位。接触反馈由 9g 微型舵机与内部耦合齿轮齿合构成,接触前脱开、接触后锁止,后续捏合转为夹持力指令,力放大系数可选,Quest 振动作辅助提示。

图2 拧螺丝任务与 DIGIT 视触觉指尖
四、AR 投影与数据质量对照
AR 侧基于 IRIS 扩展,MuJoCo 数字影子把 RUMI 位姿变换到机器人基坐标系,逆运动学给出构型;QR 码与桌面深度平面完成基座配准,catch-to-teleop 对准投影末端。5 名 VR 遥操作经验有限的参与者完成箱体取放,每条件 10 条共 100 条:AR 条件关节限位违规 3/50,无 AR 为 16/50;关节速度违规 11/50 对 29/50;平均可操作度高 19.6%,初始位姿更聚拢、平均笛卡尔速度更低。
五、真机任务成功率对比
约 100 条/任务:CoinFT 用于齿轮装配、白板擦拭,按 z′=z+Fz/K(K=1000,10 N/cm)生成力调整阻抗轨迹;DIGIT 用于拧螺丝、纹理分拣,按 VITaL 流程 ResNet-18 触觉与视觉编码器对比预训练后冻结训练 ACT。20 次评测:齿轮 20/20(无触觉 7/20);白板 16/20(7/20);拧螺丝 9/20(3/20);分拣 17/20(9/20)。
六、仿真装箱力反馈消融
MuJoCo 装箱区分易碎灯泡与重型变压器。有力反馈演示力 5.66 N / 22.82 N,rollout 5.42 N / 19.86 N,成功率 94% / 97%;无反馈灯泡 18.46 N,全部超 10 N 阈值、0% 成功,变压器 15.83 N / 13.67 N / 99%。
七、对应 Robotiq 末端产品选型
真机 robotiq电爪 即 二指电爪 2F-85;大件选 二指电爪2F-140(140 mm 行程、10–125 N 夹持力);精密装配选 二指电爪Hand-E(50 mm 平行行程、IP67);力闭环选配 FT300S力矩传感器(六维 ±300 N/±30 Nm、100 Hz、IP65),可与 手腕相机 及夹爪无缝集成。

图3 Robotiq 2F-140 宽行程自适应夹爪
| 产品型号 | 核心技术参数 | 独特优势 | 适用平台或接口 |
| 二指电爪 2F-85 | 行程 85 mm;自适应二指;位置与力反馈;工业总线通信 | 复刻非线性连杆运动学,支持平行与包络抓取;适配实体制造复杂工况;协作臂即插即用 | UR、Franka 等主流协作臂;Modbus RTU/TCP、EtherNet/IP、PROFINET、EtherCAT、DeviceNet、CANopen |
| 二指电爪2F-140 | 行程 140 mm;夹持力 10–125 N;重复定位 ±0.08 mm;指尖分辨率 0.6 mm;IP40 | 宽行程适配大件与宽体零件;金属硬件、内置位置反馈;闭合速度可调 | 主流协作臂;Modbus RTU(RS-485) |
| 二指电爪Hand-E | 50 mm 平行行程;高精度重复定位;IP67 密封 | 平行夹持一致性高,适合精密装配;密封设计适配严苛工况;UR+ 认证 | UR e 系列等协作臂;URCap 即插即用 |
| Robotiq FT300-S力矩传感器 | 六维 ±300 N / ±30 Nm;过载 500%;噪声 0.1 N;数据输出 100 Hz;IP65;约 440 g | Force Copilot 直观力控编程;新外形易装工具法兰;与夹爪、腕部相机无缝集成;数字信号抗噪 | UR 等协作臂;Modbus RTU / 数据流(RS-485) |
| 手腕相机 Wrist Camera | 单快照多零件定位;颜色验证;内置照明 | 与夹爪协同先找位再轻柔插入;免额外电缆与安装板;检测设置可自定义 | 搭配 Robotiq 夹爪 / 吸盘 |
| Epick / AirPick吸盘 | 真空吸附 | 适配平整大件与板材箱袋;与视觉、夹爪方案组合部署 | 协作臂真空系统 |
更多相关资讯,欢迎关注“欣佰特科技”,持续为大家带来“具身智能领域”前沿技术及应用!详情可邮件咨询 sales@cnbestec.com 。
DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。
更多推荐


所有评论(0)