论文记录 · 证据边界公开

SpatialVLA: Exploring Spatial Representations for Visual-Language-Action Model

Robotics: Science and Systems 2025 · 2025-01-27 · 视觉识别

论文元数据

作者: Delin Qu、Haoming Song、Qizhi Chen、Yuanqi Yao、Xinyi Ye、Yan Ding、Zhigang Wang、JiaYuan Gu、Bin Zhao、Dong Wang、Xuelong Li
机构: Shanghai AI Laboratory、Fudan University、Shanghai Jiao Tong University、Zhejiang University、ShanghaiTech University、TeleAI
发布日期精度: 日
研究方向: 视觉识别
机器人: 未关联具体机器人
DOI: 10.48550/arXiv.2501.15830
arXiv: 2501.15830
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验可访问（使用限制见许可证）
权重: 已核验可访问（使用限制见许可证）
数据: 未核验
许可证: 部分制品许可证缺失/待澄清

当前实践优先级

高潜待持续验证 · 74/100 · 13–24 个月

路线标签：可能成为新主流、空间表征 VLA 颠覆性分支

社区证据类型：尚无独立社区验证

SpatialVLA把空间坐标表征、动作token和跨本体预训练结合，在WidowX/Franka上给出较广证据；但第三方仅有框架集成，仓库LICENSE缺失和模型卡许可字段空白必须重点跟踪。

近期窗口 · 28/35
发布距评分基准日 17 个月，落入 13–24 个月窗口。
社区可复查验证 · 10/25
存在独立框架集成，尚无论文实机数字精确复现。
跨领域技术创新 · 19/20
3D空间表征、离散动作token、VLM预训练和跨本体数据融合。
量化实机证据 · 9/10
WidowX 7套件各11次共77次，并覆盖Franka 13任务。
开放与可复现 · 3/5
代码和8.09GB权重公开，但LICENSE与结构化许可元数据缺失。
工程实用增量 · 5/5
RTX4090约8.5GB、20Hz提供可部署的4B级空间VLA参考。

社区可复查证据：

社区证据 1
第三方框架已接入SpatialVLA，证明可采用性；未复现论文WidowX/Franka成功率。

证据缺口：无独立实机精确复现；仓库根LICENSE缺失；模型卡license字段空；64×A100约10天训练；预训练混合许可证复杂

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

已终审工程资源

官方模型/权重 · 许可证 Model card text describes MIT, but the Hugging Face license metadata field is empty; base-model and data terms still apply · 最近核验 2026-07-22
依赖：SpatialVLA repository、Transformers、matching tokenizer, processor and normalization statistics；硬件/传感器：RTX 4090-class GPU reported at roughly 8.5 GB inference memory、robot-specific fine-tuning and observation/action adapters；实机证据：Official paper demonstrates WidowX and Franka transfer, but the pre-trained checkpoint is not a turnkey policy for every reported task.；开放范围/限制：The empty structured license field and missing repository LICENSE are explicit reproducibility/legal gaps, not proof that the files are proprietary or MIT licensed.
官方代码 · 许可证 README states MIT, but the verified repository root has no LICENSE file; license not independently enforceable from repository contents · 最近核验 2026-07-22
依赖：Python、PyTorch、Transformers、Qwen2-VL/PaliGemma-related components as configured、OXE/RH20T conversion、robot-specific deployment adapter；硬件/传感器：paper pretraining uses 64 A100 GPUs for about 10 days、RTX 4090 inference uses about 8.5 GB and targets 20 Hz、WidowX or Franka hardware for reported transfer；实机证据：WidowX evaluation covers seven suites with 11 rollouts each (77 total); Franka evaluation covers 13 tasks.、A third-party world-model evaluation repository integrates SpatialVLA, but this is not an exact reproduction of the paper's real-robot scores.；开放范围/限制：Treat code as source-available until the owner adds an unambiguous LICENSE file; repository text alone must not be converted into an unconditional MIT claim.

“官方”表示归属与论文关系已核验；仍应按所列依赖、硬件和许可证复现。

每日候选人工终审

SpatialVLA用Ego3D Position Encoding把单目深度转成自我中心3D位置编码，并以Adaptive Action Grids把动作离散化后随本体重采样；在OXE+RH20T的1.1M真实episode上用64×A100训练10天。3.5B模型在RTX4090约8.5GB、20Hz；SimplerEnv Google/WidowX、真实WidowX 77次、Franka 13任务和LIBERO均给出量化结果。官方代码和约8.09GB模型可取，世界模型评估框架也已集成其runner；但固定main的README声称MIT而LICENSE链接实际404，根代码许可不能视为已核验，且预训练数据混合和实机微调数据未冻结发布。它是空间表征进入VLA的颠覆性分支，进入高优先深评而不伪造独立复现。

实机证据：quantified_widowx_franka_multi_task_author_evaluation；真实WidowX七套任务每套11次，共77次；另设Franka 13任务覆盖单任务、指令跟随和多任务。模型单RTX4090约20Hz、8.5GB。训练使用64×A100十天，LoRA微调通常4或8×A100；没有独立实验室同协议实机复现。

硬件/本体：WidowX、Franka、single third-person RGB camera、monocular depth estimator、RTX 4090 inference

红旗与边界：README的MIT LICENSE链接在固定提交为404；64×A100十天预训练成本极高；单目深度与相机标定误差可能直接污染3D编码；主要实机结果均为作者团队；1.1M训练混合没有冻结manifest；部分SimplerEnv任务按社区惯例被排除；没有独立同协议复现

查看资源 · code · 状态 source_available_license_link_broken · 许可证 README declares MIT but referenced root LICENSE is 404 at the verified commit; dependency terms remain separate
固定提交含预训练/LoRA/全量微调、RLDS、推理和SimplerEnv适配；Python>=3.10、Transformers>=4.47，CPU内存可能需tcmalloc。
查看资源 · weights · 状态 verified_public_non_gated_model · 许可证 MIT model card; PaLiGemma2, ZoeDepth and other components retain upstream terms
固定revision公开非gated，19文件约8,094,220,243 bytes；另有mix与Fractal/Bridge微调模型。
data · 状态 external_oxe_rh20t_sources_no_immutable_training_mixture · 许可证 OXE and RH20T component-specific licenses
1.1M episode来自OXE子集与RH20T；筛选权重、完整预训练manifest、Franka/WidowX微调数据与实机日志没有冻结发布。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-07-22。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。