RoboSense 是面向拥挤与非结构化环境的第一视角机器人感知与导航数据集及基准,由上海交大团队开源,重点覆盖人群密集、遮挡严重的真实户外场景,弥补了自动驾驶数据集在低速服务机器人视角下的缺失。
- 机器人平台
- 移动机器人、配送机器人
- 数据类型
- 双臂与移动操作数据集
- 协议
- 以官方仓库为准
硅基参考数据集库建立遥操作、轨迹、多模态、RGB-D、力矩、触觉和语言数据的元索引,方便按任务、平台与协议筛选对照。
按场景进门
每个场景挑了策展代表,点进去 3 秒判断适不适合;下载与细筛是后一步。
叠衣、收桌、厨房家务。挑的是能接到家用机型、任务口径清楚的代表集。
北京人形 RoboMIND / 智元 AGIBOT WORLD 2026 / 智元 AGIBOT WORLD 数据集 1.0
抓起来、放下去,所有操作策略的第一课。经典基准与大规模真机都有。
DROID / GraspNet-1Billion / Fourier ActionNet
左右手配合、递送、双臂长程。ALOHA 系与国产真机大集为主。
ALOHA Unleashed: 双臂灵巧操作示范集 / Mobile ALOHA / 智源 RoboCOIN
多指抓握、手内旋转、手物交互。做灵巧手和多指末端先看这里。
DexGraspNet / ACRONYM / DexYCB
插接、装配、拧螺丝、线缆操作。对标产线工位的操作数据。
Assembly101 / RH20T / ALOHA Unleashed: 双臂灵巧操作示范集
多阶段任务连着做。评估策略的持续性与恢复能力先看这批。
CALVIN / BEHAVIOR-1K / Meta-World
人形真机训练集:AGIBOT WORLD、RoboMIND、ActionNet 这一档。
智元 AGIBOT WORLD 2026 / 智元 AGIBOT WORLD 数据集 1.0 / 北京人形 RoboMIND
室内导航、场景图、可达性理解。移动底盘与空间智能用。
vLAR PhysInOne / ARIO 全机器人统一数据集 / InternData-M1
轮式底盘 + 机械臂:边走边干。开放世界作业看这批。
Mobile ALOHA / Galaxea Open-World Dataset / ARIO 全机器人统一数据集
仿真基准、域随机化、合成数据。先跑通再迁真机。
Meta-World / RLBench / robosuite
RoboSense 是面向拥挤与非结构化环境的第一视角机器人感知与导航数据集及基准,由上海交大团队开源,重点覆盖人群密集、遮挡严重的真实户外场景,弥补了自动驾驶数据集在低速服务机器人视角下的缺失。
HIW-500 覆盖约 500 类家庭物品的真机操作数据,HF 页面标注 robotics/humanoid 标签并采用 CC BY-4.0 开放许可,数据结构中含完整相机内参与时间戳,便于直接做多视角重建与策略训练。
OpenNeoData 是新智具身在 Hugging Face 开源的真机操作数据集,采用 LeRobot 格式、规模在十万至百万样本量级,标签体系覆盖机器人操作与模仿学习,许可为 CC BY-NC-SA 4.0 非商业使用。
Hy-Embodied-0.5-VLA-Data 是腾讯在 Hugging Face 公开的具身 VLA 训练数据,采用 LeRobot/Lance 格式并关联论文 arXiv:2606.14409,采用 CC BY-4.0 许可,可直接用于视觉语言动作模型的训练与复现。
RW-RL-Dataset 由上海交大 MINT 实验室发布,HF 页面显示约 9.95 万条样本,特色是带人工干预(human intervention)标签,专门服务真机强化学习与在线纠错训练,而非纯离线模仿。
GM-100 是蚂蚁灵波(Robbyant)在 Hugging Face 开源的家庭双臂操作数据集,围绕约 100 类家庭任务采集真机数据,用于验证通用家庭操作模型在长尾日常任务上的表现。
Mobile ALOHA 开源了移动双臂遥操作硬件方案与配套示教数据,用 50 条示教即可让机器人完成炒虾、乘电梯等长程家务任务,是「低成本硬件 + 少量示教」路线影响力最大的公开工作之一。
我是硅基参考 Agent,熟产品库、数据集、公司档案和近期资讯。你可以直接问,也可以先让我了解你是谁、在看什么——我会把库里的资料和你说的话对上号,像同事聊天那样一点点聊。