智涌飞轮

具身数据 · 采集 × 效用计量 × 独立验证合作洽谈工作台登录

具身智能数据集生态深度普查报告

0. 一页结论

  1. 许可是这条赛道最大的分水岭。同为"开源",BridgeData V2 是 CC BY 4.0(可商用、可再分发),而 AgiBot World 是 CC BY-NC-SA 4.0(禁商用+相同共享)、Ego4D 是 CC BY-NC 4.0(禁商用)。把 NC 数据混进商用训练管线是合规事故,不是技术问题。
  2. 规模竞赛已进入"十万小时"量级:光轮 EgoSuite-Open100K(100,000 小时第一人称)> AgiBot World 全量(100k+ 轨迹/300h+,Beta 宣称 ~1M 轨迹)> DROID(76k 轨迹/350h)> RoboMIND(107k 轨迹,2.0 版 310k+)> OXE(1M+ 轨迹聚合)。
  3. 格式已收敛出双标准:Google 系遗产 RLDS/TFDS(OXE、DROID)正在被 LeRobotDataset v3.0(Parquet+MP4、Hub 可流式)取代;光轮进一步用 LeRobot v3 + MCAP 双格式发布,是新发布数据集的参考范式。
  4. 采集规范共识:多相机(1 全局/过肩 + 腕部,厂商级 8 相机+深度)+ 相机内外参标定随包 + 纳秒级时间戳 + 脱敏管线 + 语言指令标注。这五件套是我们垂域数据产品可以直接对标的最低标准。
  5. 商业模式三极:智元(NC 开源换生态)、光轮(明示"学术+商业训练可用"+gated 引流)、京东 robotdata(按原子任务 SKU 付费交易,如"用干布整理纸巾盒表面 78GB")。我们垂域业务天然属于第三极,合规管线应对标光轮。

1. 海外通用真机操作数据集

1.1 Open X-Embodiment(OXE / RT-X 数据池)

1.2 OXE 成员:Fractal(Google 厨房数据)与 RT-1/Kitchen

1.3 BridgeData V2

1.4 DROID

1.5 RoboMIND(北京人形机器人创新中心 X-Humanoid)

1.6 ALOHA / Mobile ALOHA

1.7 FMB(Functional Manipulation Benchmark)

1.8 NVIDIA GR00T N1 数据族(真机+人类视频+合成混合)

1.9 RoboTwin 2.0(清华+上海AI Lab+SJTU+HKU)

1.10 LIBERO(附带条目,与本项目记忆相关)


2. 第一人称/人类视频数据集

2.1 EgoSuite-Open100K(光轮智能 Lightwheel,2026-08-21 发布)

2.2 Ego4D(Meta)

2.3 EgoDex(NVIDIA,附带条目)

2.4 LAPA(Latent Action Pretraining,ICLR 2025)

2.5 DexMV(用户清单中"DexMVC"的实际所指)


3. 国内厂商数据集(2025-2026 新发布为主)

3.1 AgiBot World(智元)

3.2 京东 robotdata(京东云具身数据交易平台)

3.3 银河通用 SynGrasp-1B / GraspVLA

3.4 它石智航 WIYH(Wish It Were Human)

3.5 LeRobot 社区数据生态(HuggingFace)


4. 许可友好度 x 规模矩阵

许可等级定义: - A = 标准开放许可(CC BY 4.0 / Apache-2.0 / MIT),可商用、可再分发(CC BY 需署名;再分发不得变更许可) - B = 可用但有条件(gated 审核 / 成员各自许可 / 页面未标注许可,需个案确认) - C = 禁商用(CC BY-NC / NC-SA),只能研究用途,不能进商用产品,NC-SA 还要求衍生同样开放 - D = 纯商业交易(按单授权,无开放许可)

数据集 规模(轨迹/时长) 许可 等级 可商用 可再分发 获取
BridgeData V2 60,096 轨迹 CC BY 4.0(原文核实) A 是(署名) 开放直下
RoboTwin 2.0 100k+ 仿真轨迹 代码 MIT A 是(代码) 是(代码) 开放
LAPA 配方(用 OXE+SSv2) 代码/权重 MIT A 是(代码) 是(代码) 开放
RoboMIND 107k 轨迹(2.0: 310k+) Apache-2.0 + gated A- gated 轻审核
DROID 76k 轨迹 / 350h CC BY 4.0(第三方口径,待核实) A- 大概率是 大概率是 开放
ALOHA / Mobile ALOHA 810 演示(Mobile) 代码 MIT;数据未明示 B 代码可 代码可 GDrive/HF
GR00T X-Embodiment Sim ~345k 仿真轨迹 页面未标注(第三方称 CC BY 4.0) B 待核实 待核实 开放
FMB 22,550 轨迹 未标注 B 待核实 待核实 开放
EgoDex 829h MIT(第三方) A- 开放
OXE 总集 1M+ 轨迹 / 22 本体 伞 Apache+CC-BY,成员各自 B 逐成员核对 逐成员核对 开放
Fractal/RT-1(OXE 成员) ~73.5k 轨迹 随 OXE B 随 OXE 随 OXE 随 OXE
LIBERO 130 任务 MIT(第三方)+ 资产链冲突记录 B 存疑 存疑 开放
EgoSuite-Open100K 100,000 小时 明示"学术+商业训练可用"+gated B+ 是(训练) 条款内 gated 审核
WIYH(它石智航) 1,000+h / 100k+ 视频 / 36.5TB HF 未标注,官网条款 B- 待确认 待确认 开放下载
SynGrasp-1B(银河通用) 10 亿帧合成(公开 24,099 条/4.91TB) 无数据卡、未标注 B- 待确认 待确认 开放
AgiBot World(智元) 100k+ 轨迹 / 300h+(Beta ~1M) CC BY-NC-SA 4.0 + Community License C 否(NC-SA) gated
Ego4D 3,670h CC BY-NC 4.0 C 否(NC) 注册审批
京东 robotdata 按任务 SKU(单 SKU 46-143GB 级) 按单交易授权 D 付费后是 商业合作

矩阵读法: - "规模大且许可友好"的只有 BridgeData V2(60k 轨迹级)与 RoboMIND(Apache-2.0);上到"十万小时"量级后全部落入 B(gated/未标注)或 C(NC)。 - 光轮 EgoSuite 是唯一在超大规模上明示"商业训练可用"的玩家——它的 gated 审核本质是商业获客漏斗。 - NC 许可(智元/Ego4D)可以安全用于研究与模型选型对照,但绝不可作为商用训练数据来源;同理不可将其转卖或混入交付数据。


5. 对智涌飞轮垂域数据业务的可借鉴点

5.1 采集规范(对标五件套)

  1. 相机配置共识:学术级 = 1 全局/过肩 + 腕部(Bridge/DROID/ALOHA/FMB 均如此);厂商级 = 6-8 相机 + 深度 + 视触觉(AgiBot);第一人称级 = 头 + 腕双相机(光轮 EgoPro)。我们首垂域最低配建议:1 固定全局 + 1 腕部/桌面特写,预留深度位。
  2. 标定随包:AgiBot 每条数据带 parameters(相机内外参);WIYH worldcode JSON 内逐相机 intrinsic/distortion/camera_model。我们每份交付 manifest 应附标定文件与采集几何图——这与本仓"最小投影+签名回执"契约天然契合。
  3. 时间戳纪律:AgiBot proprio_stats.h5 用纳秒时间戳做多源对齐;WIYH 逐帧 timestamp + 位姿。多相机/多传感不同步是数据废品的首要原因。
  4. 频率与单位显式化:Bridge 标注 5Hz;LeRobot meta/info.json 强制 fps 字段。交付物必须写明控制频率、关节单位、夹爪归一化口径(RoboMIND 的 BGR 坑说明连头部大厂都会踩格式坑)。
  5. 脱敏管线:光轮"人脸/车牌模糊 + 人工复核 + 知情同意"是可对标的行业标准动作,与本仓数据安全规则(不入 Git 原始媒体/采集者身份/同意书)形成采集端-仓储端闭环。

5.2 任务设计(SKU 化与三层类目)

  1. 原子任务 SKU 化:京东的命名法——「用干布+整理+纸巾盒表面」「用小碟子+摆放+待客糖果」= 工具/动作/物体(+容器/表面) 的组合,直接决定了数据集颗粒度与定价单位。我们首垂域 7 字段的任务定义可按此结构化。
  2. 三层类目树:光轮 环境(7)→场景类型(128)→任务大类(18)→任务(15,000+);Bridge 24 环境/13 技能;RoboMIND 479 任务/38 技能/96 物体类。建议我们的垂域清单采用 场景→任务→原子技能 三层,技能层控制在 10-40 个以便统计与质检。
  3. 长轨迹切原子段:FMB 把 20-100 秒轨迹切成 grasp/regrasp/rotate/insert 等原语;AgiBot 用 action_config + key_frame 做同样的事。众包采集按原子段验收,比按整轨迹验收更可控——这直接可用于我们的 QC 规则与结算语义。

5.3 标注体系(最小标注集 + 增值层)

5.4 许可与合规策略

  1. 交付默认商用友好:凡是开放样例/能力展示数据,用 CC BY 4.0 或自定"允许训练"条款(学光轮明示"commercial training"),避免学智元 NC-SA 把商业客户挡在门外。
  2. 客户专属数据走交易授权(京东模式):按单授权 + 禁再分发 + 禁转卖写进条款;我们的 Platform 适配器(manifest/签名/审计)正好承载授权与溯源。
  3. 训练侧合规红线:商用模型训练数据白名单只收 A/A- 级(Bridge、RoboMIND、DROID 核实后、EgoSuite 条款内);AgiBot/Ego4D 只做研究对照;OXE 成员逐个核对 spreadsheet 后才可用。
  4. gated 机制即商务漏斗:AgiBot(同意+联系方式)、RoboMIND(同意条款)、光轮(2-3 天审核)都把"开放下载"改造成"留资+条款确认"。我们发布垂域样例集时可复用此模式。

5.5 格式选择


6. 待核实清单(下一轮收口项)

  1. DROID 官方许可原文(droid-dataset.github.io 本次抓取网络失败;HF droid-dataset/droid 数据卡需复核)。
  2. GR00T 系数据集许可(以 NVIDIA docs 的 models-and-datasets 许可清单为准)。
  3. WIYH 使用条款原文(官网 wiyh.tars-ai.com)。
  4. SynGrasp-1B 全量发布口径与许可(HF 公开仓仅 24,099/4.91TB 且无卡)。
  5. FMB、DexMV 数据许可原文。
  6. LIBERO 资产链许可冲突的最终结论(项目记忆已有记录,商用前必查)。

7. 主要来源索引