← 返回全部数据集

NYU Franka Play

开源

New York University

NYU Franka Play 是由 New York University 发布的 Play-to-Policy 数据集。

该数据集通过让人类在玩具厨房中自由操作 Franka 机器人来收集非结构化的 play data,然后通过 Play-to-Policy 框架将其转化为目标条件策略,实现零样本泛化的操作任务。

属于 Open X-Embodiment 成员数据集,核心场景包括开关微波炉门、烤箱门、转动灶台旋钮、移动锅等。

机构
New York University
规模
玩具厨房自由操作,微波炉/烤箱/灶台
许可证
CC BY 4.0
机器人类型
机械臂
任务类型
操作 家居
发布年份
2023
数据模态
视觉、本体状态、动作
🤖 人工遥操作采集✅ 部分人工标注🏠 100%真机📊 无数据划分

VLA 框架兼容性

🧠 π0🧠 OpenVLA🧠 Octo🧠 RT-2🧠 RDT-1B

数据格式

存储格式RLDS / TFDS
数据规模~10GB
压缩方式gzip
文件布局RLDS 格式,RGB + 本体状态 + 动作 + 目标条件
索引方式TFDS 内置索引
格式版本TFDS/RLDS
episode
step
observation
action
goal

数据内容

传感器规格

RGB 相机(多视角)
关节编码器

数据统计

场景数玩具厨房
物体数微波炉、烤箱、灶台、锅
任务数开关微波炉/烤箱门、转动旋钮、移动锅
轨迹/片段数~1,000

标注信息

动作序列目标条件

相关链接

引用信息

@article{cui2023playtopolicy,
  title={Play to Policy: Learning Goal-Conditioned Policies from Unstructured Play Data},
  author={Cui, Zichen Jeff and Wang, Yibin and Shafiullah, Nur Muhammad and Pinto, Lerrel},
  journal={arXiv preprint arXiv:2307.05924},
  year={2023}
}

采用的数据标准

相关数据集

讨论

AI 助手
输入需求,AI 帮你在 58 个数据集、19 个标准、18 个工具中智能匹配