论文记录 · 证据边界公开

Deform360: A Massive Multi-view Visuotactile Dataset for Deformable World Models

arXiv / ECCV 2026 · 2026-07-06 · 灵巧手与视觉触觉操作

论文元数据

作者: Hongyu Li、Wanjia Fu、Xiaoyan Cong、Zekun Li、Binghao Huang、Hanxiao Jiang、Xintong He、Yiqing Liang、Rao Fu、Tao Lu、Srinath Sridhar、Kevin A. Smith、George Konidaris、Yunzhu Li
机构: 机构尚未补齐
发布日期精度: 日
研究方向: 灵巧手与视觉触觉操作
机器人: 未关联具体机器人
DOI: 未披露
arXiv: 2607.05390
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验开放
权重: 未核验
数据: 已核验开放
许可证: 许可证条款已核验（不等于可商用）

当前实践优先级

高潜待持续验证 · 71/100 · 0–6 个月

路线标签：近期热门、可能成为新主流、可变形世界模型数据基础设施2.0

社区证据类型：尚无独立社区验证

41路同步视觉触觉和密集3D把可变形物体世界模型从小样本推进到198物体/23.3M帧；数据与MIT流水线开放，但训练代码和checkpoint缺失。

近期窗口 · 35/35
发布距评分基准日 0 个月，落入 0–6 个月窗口。
社区可复查验证 · 0/25
尚无独立完整下载、训练或机器人规划复现。
跨领域技术创新 · 20/20
多视角标定、视觉触觉、markerless 3D、2D/3D 世界模型与规划基准统一。
量化实机证据 · 6/10
真实物体交互数据充分，但机器人规划仍是初步作者演示。
开放与可复现 · 5/5
MIT 数据、下载器、同步和标注流水线已开放；世界模型训练与权重未开。
工程实用增量 · 5/5
提供公开可扩展的大规模可变形物体数据底座和统一2D/3D横评。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；完整大库未整包下载；无世界模型训练代码/权重；规划证据初步；无独立复现

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

已终审工程资源

官方代码 · 许可证 MIT · 最近核验 2026-07-21
依赖：Python>=3.10、NumPy、OpenCV contrib、Hugging Face client、optional HDF5/PLY readers、CUDA and gsplat for most annotation stages、EGL-capable GPU for visualization；硬件/传感器：CPU supports control-point stages、CUDA GPU required for most annotation stages、41-camera capture hardware is not required merely to consume the released dataset；实机证据：pipeline processes the paper's real 41-view visuotactile interactions; paper additionally shows preliminary robot planning；开放范围/限制：The repository explicitly excludes pretrained world-model checkpoints and world-model training code. It is a data access, preprocessing, reconstruction, perception and annotation release.
官方数据集 · 许可证 MIT · 最近核验 2026-07-21
依赖：Hugging Face dataset storage、official deform360 downloader、large local storage、optional annotation processing extras；硬件/传感器：large storage and network bandwidth for the complete 41-view corpus、CUDA GPU for reconstruction and annotation stages、consumption does not require the original camera rig；实机证据：198 physical deformable objects, 1,980 real interactions, 41 synchronized views, bimanual tactile grippers and approximately 23.3 million frames；开放范围/限制：The public snapshot may be staged independently of the paper totals, so object/file coverage must be monitored by revision. Dataset openness does not imply the paper's trained world-model checkpoints are open.

“官方”表示归属与论文关系已核验；仍应按所列依赖、硬件和许可证复现。

每日候选人工终审

Deform360 以 41 路同步环视相机和双手触觉夹爪采集 198 个日常可变形物体、1,980 次交互、约 2,330 万帧/215 小时，并同时比较 2D 视频与 3D 粒子世界模型。官方 MIT 数据、下载器、预处理/标注流水线和公开非 gated 数据仓已核验，是可变形物体世界模型的近期数据基础设施；但预训练世界模型代码和 checkpoint 明确未发布，完整数据体量很大。

实机证据：real_dataset_and_preliminary_robot_planning_demo；数据完全来自真实物体交互，包含标定、多视角 RGB、触觉和 markerless 3D；论文给出可变形物体 MPC 规划的初步实机演示，但不是大规模策略部署试验。

硬件/本体：41 synchronized surround cameras、bimanual tactile UMI grippers、robot planning with learned world models

红旗与边界：世界模型训练代码和 checkpoint 未开放；完整 41 路数据下载与处理成本很高；机器人规划只属初步演示；数据集下载器允许公开快照分阶段上线，当前托管对象范围需持续监测

查看资源 · code · 状态 official_dataset_pipeline_fixed_commit · 许可证 MIT
固定提交 d8522a4403b766aeb387510c04e89032a56fdf35；84 文件，含下载、同步、触觉、重建和标注工具；README 明确不含世界模型训练代码和 checkpoint。
查看资源 · data · 状态 official_public_non_gated_revision_verified · 许可证 MIT
固定修订 7fea8e20231a47641d1d2bc8791920ec4e62ec5e，非 private、非 gated，真实媒体文件与 sidecar 已可列举。
weights · 状态 world_model_checkpoints_not_released · 许可证 not_disclosed
README 明确预训练世界模型 checkpoint 未发布。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-07-21。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。