示范数据的规模受限于硬件成本与遥操工效

一、胶水层的隐性成本

数采阶段有三类隐性成本:临时脚本难复用、ROS bag 与话题命名把人绑在中间件、换型后转换器整体重写。Trossen Data Collection SDK 纯 C++、不依赖 ROS、CMake 在 Ubuntu 构建,就跑在控制机器人那台算力上,不必再搭一套中间件环境。

图1 Workbench 式双臂数采工位场景:主从臂对置、工作台面固定

二、五层解耦与注册表

Hardware 抽象设备接口,Producers 支持轮询与事件推送,200 Hz 关节流与 ZED、RealSense 的 push 通道并存;Sink 用无锁 MPSC 队列,每轮批量最多 64 条;Backend 每 episode 一实例,Session Manager 管时长与自动停止,Scheduler 双车道计时加自旋等待。

图2 数采软件界面实景:多相机视图与绿、黄、红状态块并行

三、双时钟戳与无锁队列

JointState、RawImage、Odometry2D 各自成形,带单调时钟与 UTC 双戳;通道惰性创建,Solo 双相机四通道、Mobile 加 SLATE 与三相机八通道,不写空通道,文件不浪费字节。

四、MCAP对比ROS包

MCAP 本是 ROS 2 bag 的底层格式,SDK 直接使用而不引入中间件。对 HDF5,它原生支持多通道异构 schema 与变速生产者,文件级锁模型更适合多线程实时录制;对 CSV 与 PNG 序列,单文件可寻址、带压缩与 CRC 校验,时间戳不必从文件名还原。

图3 WidowX 机械臂侧前四分之三产品图,可见腕部相机支架与走线

五、转换器对齐三十赫兹

转换脚本自动发现流、关节名与相机规格,把各路数据对齐到 30 Hz 时基并插值;主臂映射 action、从臂映射 observation.state、底盘速度追加两侧;输出 Parquet、MP4 与 episode_stats.jsonl 的 min/max/mean/std,做质检基线。

六、四档新品与控制器

WidowX 四档共用 iNerve:Core Leader 遥操主臂、Core Follower 入门从臂、Pro 700 mm 与 4 kg、Heavy 1.4 m 与 6 kg。控制器在底座内、600 Hz 以上运行,补偿自重与摩擦;M12 锁紧以太网替代 USB,GPIO 接急停与硬件同步。

产品型号

核心技术参数

独特优势

适用平台或接口

Trossen Data Collection SDK

开源 C++;不依赖 ROS,Ubuntu + CMake;关节流至 200 Hz、相机 30 fps、底盘里程计 50 Hz;五层架构加静态工厂注册表;JSON 配置加 CLI --set 覆盖

多模态同步录制、episode 级文件隔离、双时钟戳、Zstd/LZ4 压缩与 CRC 校验

Solo AI / Stationary AI / Mobile AI;wxai_v0、SO-101、RealSense D400、ZED、USB/V4L2、SLATE

TrossenMCAP

基于 MCAP 容器;Protobuf proto3 schema(JointState、RawImage、Odometry2D);metadata 记录 trossen_sdk_recording;chunk 默认 4 MB

通道惰性创建、单文件可寻址、Foxglove 可视化、压缩后体积下降

供 trossen_mcap_to_lerobot_v2 转换,或自研 Backend 扩展

trossen_mcap_to_lerobot_v2

统一 30 Hz 时基;主臂映射 action、从臂映射 observation.state;输出 Parquet、MP4、info.json 与 episode_stats.jsonl

一条命令直出,可直接被 LeRobot 训练脚本读取并上传 HuggingFace Hub

LeRobot V2 / HuggingFace 生态

WidowX Core Leader

6 DoF;700 mm 工作范围;2 kg 负载;无相机;3,099.95 美元(学术与初创 2,480 美元)

专用遥操主臂,可与任意 WidowX Follower 实时配对

主从遥操、示教采集

WidowX Core Follower

6 DoF;700 mm;2 kg;2,995 美元(学术 2,396 美元);带相机 3,395 美元(学术 2,716 美元)

每工位成本更低的入门从臂,平台能力不缩水

Solo AI 组合、多工位数采

WidowX Pro

6 DoF;700 mm;4 kg;3,495 美元(学术 2,796 美元);带相机 3,895 美元(学术 3,116 美元)

研究、数采与应用开发的主力机型

Stationary AI、Workbench 工位

WidowX Heavy

6 DoF;1.4 m 工作范围;6 kg 负载;4,995 美元(学术 3,996 美元);带相机 5,395 美元(学术 4,316 美元)

大工作空间与高负载,仍用同一控制器与软件

大件搬运、长行程数采

iNerve 控制器

内置底座;600 Hz 以上运行;补偿自重、摩擦与自身惯性力;集成触摸屏;M12 锁紧以太网;GPIO 接急停与硬件同步

精度内建而非靠编程补偿;免笔记本现场诊断;工业级连接替代 USB

全系 WidowX 与 Trossen AI 平台

WidowX AI(Trossen AI 套件配置)

6 DoF;700 mm 工作范围;1.5 kg 负载;重复精度 1 mm;可配 Base、Leader、Follower 与 RealSense D405

高精度、多配置,适配套件化数采台与双臂协同

Solo AI / Stationary AI / Mobile AI(口径来源:欣佰特产品页)

图4 iNerve 控制器主板:集中式驱动与接口布局

应用场景:工程团队搭建自研数采流水线;新传感器接入与 Backend 扩展;高频关节与多相机同步录制的性能调优。

解决痛点与方案:无锁 MPSC 队列把磁盘延迟与 200 Hz 轮询解耦;分块与 Zstd 压缩控制体积;CRC 与元数据内嵌保证数据可追溯。

产品

典型应用场景

解决的痛点问题

Trossen Data Collection SDK

模仿学习示范采集、遥操作流水线搭建、新传感器评测

脚本难复用、格式转换反复重写、时序不可信

TrossenMCAP

高频关节与多相机同步录制、故障 episode 快速剔除

ROS bag 重依赖、单点损坏拖垮整批、时间戳靠文件名猜

trossen_mcap_to_lerobot_v2

数据集交付出库、团队间数据交接、训练前质检

转换工具另写一套、缺统计量难以判断数据质量

WidowX Core Leader / Core Follower

主从遥操示教、低成本多工位铺开

主臂与从臂不匹配、单工位投入偏高

WidowX Pro / WidowX Heavy

桌面级科研操作、较大工件与长行程任务

负载或工作空间不足、换型即换软件

iNerve 控制器

长时间连续采集、现场诊断与安全联锁

外置控制箱占位、USB 掉线、零点漂移

Solo AI

户外与实地数据采集、便携部署、云与端侧训练

场地固定、搭建慢、设备搬不动

Stationary AI

实验室双臂协同、固定工位数采、远程遥操

多臂同步与多相机标定繁琐

Mobile AI

移动操作与实地场景数据采集

底盘、臂与相机难以统一时基

SLATE 移动底盘

移动 AI 里程计、室内导航与移动作业采集

移动数据与臂数据各自为政

ZED / RealSense D400

主相机、腕部相机、深度流采集

多相机串号与带宽管理混乱

Trossen Data Collection SDK 面向模仿学习示范采集与遥操作流水线,可在 Solo AI、Stationary AI、Mobile AI 三种形态与自有工装之间迁移;配合 WidowX 四档,同一套录制与转换流程可从单工位铺到多工位。

解决痛点与方案:数采的脆弱点不在臂能否动,而在“采—存—转—训”接口是否统一。SDK 用五层架构与注册表统一硬件接入,用 TrossenMCAP 统一存储与时间基准,用一条转换命令统一输出到 LeRobot V2,把胶水层收敛成可维护的框架。

更多相关资讯,欢迎关注 “欣佰特科技” ,持续为大家带来 “具身智能领域” 前沿技术及应用!详情可邮件咨询 sales@cnbestec.com 。

Logo

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐