RSS2024,提供仿真+真实Franka操作数据(抓取/绕线等),用语义对齐弥合Sim2Real鸿沟,含域随机化集。
- 机器人平台
- Franka、仿真
- 数据类型
- 仿真基准
- 协议
- 以官方公开许可为准
硅基参考数据集库建立遥操作、轨迹、多模态、RGB-D、力矩、触觉和语言数据的元索引,方便按任务、平台与协议筛选对照。
按场景进门
每个场景挑了策展代表,点进去 3 秒判断适不适合;下载与细筛是后一步。
叠衣、收桌、厨房家务。挑的是能接到家用机型、任务口径清楚的代表集。
北京人形 RoboMIND / 智元 AGIBOT WORLD 2026 / 智元 AGIBOT WORLD 数据集 1.0
抓起来、放下去,所有操作策略的第一课。经典基准与大规模真机都有。
DROID / GraspNet-1Billion / Fourier ActionNet
左右手配合、递送、双臂长程。ALOHA 系与国产真机大集为主。
ALOHA Unleashed: 双臂灵巧操作示范集 / Mobile ALOHA / 智源 RoboCOIN
多指抓握、手内旋转、手物交互。做灵巧手和多指末端先看这里。
DexGraspNet / ACRONYM / DexYCB
插接、装配、拧螺丝、线缆操作。对标产线工位的操作数据。
Assembly101 / RH20T / ALOHA Unleashed: 双臂灵巧操作示范集
多阶段任务连着做。评估策略的持续性与恢复能力先看这批。
CALVIN / BEHAVIOR-1K / Meta-World
人形真机训练集:AGIBOT WORLD、RoboMIND、ActionNet 这一档。
智元 AGIBOT WORLD 2026 / 智元 AGIBOT WORLD 数据集 1.0 / 北京人形 RoboMIND
室内导航、场景图、可达性理解。移动底盘与空间智能用。
vLAR PhysInOne / ARIO 全机器人统一数据集 / InternData-M1
轮式底盘 + 机械臂:边走边干。开放世界作业看这批。
Mobile ALOHA / Galaxea Open-World Dataset / ARIO 全机器人统一数据集
仿真基准、域随机化、合成数据。先跑通再迁真机。
Meta-World / RLBench / robosuite
RSS2024,提供仿真+真实Franka操作数据(抓取/绕线等),用语义对齐弥合Sim2Real鸿沟,含域随机化集。
帝国理工在 Rethink Sawyer 上采集约 2000 段腕部相机遥操作演示,强调灵巧操作的鲁棒视觉模仿学习(2023)。
UT Austin 在 UR5 上采集 5000 段玩具厨房家务演示,含食物、锅具拾取与放置,用于层级模仿学习(2023)。
人形双臂+全身移动10300条260任务,多模态含LiDAR(2025) Humanoid Everyday: 开放世界人形操作数据集 开源数据集,含公开可下载样本与官方评测。
2023年多阶段电缆布线分层imitation数据集,含1442路由、11915选择与257端到端演示轨迹。
2022年大规模真实机器人操作数据集,13万片段覆盖700+任务,含语言指令与多模态传感数据。
2023年Kinova Jaco2语言标注遥操作数据集,1085条桌面拾放轨迹,含多视角RGB与状态。
2023年发布的以自我为中心多模态3D感知数据集与基准,含5000+扫描、100万RGB-D视图、160k 3D框、760+类。
2024年发布的城市级具身仿真平台,含GRScenes十万个可交互场景、89类功能场景,配套LLM驱动的NPC与GRBench基准。
2024年发布的统一可扩展视觉-语言机器人交互仿真框架,基于Isaac Sim,含生成式3D资产与四类交互基准。
2025 RSS/ICML发布的统一仿真平台与合成数据集,含51万轨迹、5000万+状态转移、276任务、5500资产,基于METASIM。
RoboSense 是面向拥挤与非结构化环境的第一视角机器人感知与导航数据集及基准,由上海交大团队开源,重点覆盖人群密集、遮挡严重的真实户外场景,弥补了自动驾驶数据集在低速服务机器人视角下的缺失。
OpenNeoData 是新智具身在 Hugging Face 开源的真机操作数据集,采用 LeRobot 格式、规模在十万至百万样本量级,标签体系覆盖机器人操作与模仿学习,许可为 CC BY-NC-SA 4.0 非商业使用。
World In Your Hands 由它石智航于 2025年12月24日开源,公开口径称其为全球首个 VLTA 多模态真实世界数据集,用于填补互联网缺动作、仿真难泛化的缺口,并为具身基座模型提供 scaling 语料。
SynData 是灵初智能(PsiBot)于 2026年5月10日发布的大规模真实世界多模态数据集,覆盖视觉、语言与动作,依托外骨骼手套采集高精度双手双臂数据,并含裸手自然交互样本。
我是硅基参考 Agent,熟产品库、数据集、公司档案和近期资讯。你可以直接问,也可以先让我了解你是谁、在看什么——我会把库里的资料和你说的话对上号,像同事聊天那样一点点聊。