Jasper-aaa/embodied-data-pyramid
Data Pyramid of Embodied Manipulation
具身智能操作数据金字塔综述,涵盖 152 个数据集、4.36 亿条机器人/UMI/仿真演示数据。来自 PKU / NTU / HKUST / NUS 等机构联合调研。
这是什么
Data Pyramid of Embodied Manipulation: A Survey 是一份系统性的具身智能操作数据综述,将散落在不同论文、机构和平台中的数据集整理成统一的"数据金字塔"框架。项目以可交互网站形式呈现,收录了 152 个数据集,合计超过 4.36 亿条机器人遥操作、UMI 手持采集、仿真环境以及通用视觉-语言演示数据。每个数据集附带规模、模态、采集方式和论文链接。
能用来干嘛
- 查找具身智能训练数据:按机器人类型、任务场景或数据规模快速定位适合的数据集,避免在零散论文里翻找。
- 对比数据集覆盖范围:并排查看不同数据集的演示数量、模态组成(视觉/触觉/力觉/语言)和采集设备,判断哪个更适合自己的训练目标。
- 了解数据源分类体系:项目将数据按来源分为五大层级——真实机器人遥操作、UMI 手持采集、仿真合成、自我中心视角视频、通用视觉-语言数据——帮助理解不同数据在策略训练中的角色与互补关系。
- 论文调研辅助:每个数据集关联原始论文和 arXiv 链接,写综述或做实验时可作为一站式索引。
适合收藏的原因
- 具身智能(Embodied AI)正处于数据爆发期,但数据集极度分散——这个项目把它收拢成一张地图。
- 152 个数据集 × 统一分类体系,是目前覆盖面最广的具身操作数据索引之一。
- 4.36 亿条演示的体量说明领域已进入大规模预训练阶段,值得关注数据来源和 scaling 趋势。
- 来自北大、南洋理工、港科大、新加坡国立等机构的联合调研,学术可信度高。