论文记录 · 证据边界公开

DexVLA: Vision-Language Model with Plug-In Diffusion Expert for General Robot Control

arXiv · 2025-02-09 · 视觉识别

论文元数据

作者: Junjie Wen、Yichen Zhu、Jinming Li、Zhibin Tang、Chaomin Shen、Feifei Feng
机构: Midea Group、East China Normal University、Shanghai University
发布日期精度: 日
研究方向: 视觉识别
机器人: 未关联具体机器人
DOI: 10.48550/arXiv.2502.05855
arXiv: 2502.05855
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验可访问（使用限制见许可证）
权重: 已核验可访问（使用限制见许可证）
数据: 已核验可访问（使用限制见许可证）
许可证: 许可证条款已核验（不等于可商用）

当前实践优先级

当前可实践 · 66/100 · 13–24 个月

路线标签：灵巧操作 VLA 高风险高收益分支

社区证据类型：尚无独立社区验证

DexVLA的可插拔扩散专家与60Hz目标适合灵巧长程任务，实机任务覆盖有价值；但仅开放Stage-1专家和示例数据、许可证限制商业使用，尚不能当完整复现基线。

近期窗口 · 28/35
发布距评分基准日 17 个月，落入 13–24 个月窗口。
社区可复查验证 · 7/25
有公开问题记录与pipeline使用痕迹，无最终paper policy独立复现。
跨领域技术创新 · 17/20
Qwen2-VL、分阶段训练、可插拔大扩散专家和长程灵巧任务结合。
量化实机证据 · 8/10
多任务每项10次并给出0.90/0.92/0.40等结果，样本仍偏小。
开放与可复现 · 2/5
代码、Stage-1和示例数据可取，但最终权重/100小时数据缺失且非商用。
工程实用增量 · 4/5
单A6000与60Hz路径有吸引力，完整部署链仍不闭合。

社区可复查证据：

社区证据 1
可查依赖和DDIM数值问题，但截至核验日未找到最终DexVLA策略的独立端到端复现。

证据缺口：开放与复现条件不足；最终VLA权重未开放；约100小时数据未开放；非商业许可；无独立端到端复现；60Hz与10-15Hz采集差异

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

已终审工程资源

官方数据集 · 许可证 CC-BY-NC-4.0 · 最近核验 2026-07-22
依赖：Git LFS、h5py、DexVLA constants and data loader、camera keys matching left/right/wrist streams；硬件/传感器：No robot is required to inspect or train on the example、robot platform is required for transfer and deployment validation；实机证据：Example data supports pipeline validation only; it is not the approximately 100-hour real-robot corpus reported in the paper.；开放范围/限制：Do not count this example as release of the paper training dataset or use its small scale to infer paper data statistics.
官方模型/权重 · 许可证 CC-BY-NC-4.0 · 最近核验 2026-07-22
依赖：DexVLA repository、Qwen2-VL base components、task-specific HDF5 demonstrations；硬件/传感器：high-memory CUDA GPU、task-specific robot data and camera configuration；实机证据：The expert is part of the paper pipeline, but the public object is not the final vision-language-action checkpoint used for all reported tasks.；开放范围/限制：Non-commercial and Stage-1 only; it cannot substantiate a claim that full DexVLA weights are open.
官方代码 · 许可证 Custom source license with non-commercial restrictions; not OSI open source · 最近核验 2026-07-22
依赖：Python、PyTorch、Qwen2-VL-2B-Instruct、diffusers、h5py ACT-style datasets、three-camera observations for example configuration；硬件/传感器：single NVIDIA A6000 reported for training experiments、ALOHA-class dual-arm platform、left, right and wrist cameras、60 Hz policy control target with demonstrations collected at 10-15 Hz；实机证据：Paper reports 10 trials per task, 0.90 average on new-embodiment tasks with 100 demonstrations, 0.92 shirt folding and 0.40 long-horizon laundry after Stage 3.；开放范围/限制：The approximately 100-hour corpus and final end-to-end DexVLA checkpoint are not released; published code does not equal a full paper reproduction.

“官方”表示归属与论文关系已核验；仍应按所列依赖、硬件和许可证复现。

每日候选人工终审

DexVLA用Qwen2-VL-2B与最高1B的ScaleDP动作专家做三阶段本体课程：跨本体预训练、目标本体对齐、复杂任务后训练。它用约100小时示范、单A6000以60Hz控制，覆盖AgileX双臂、Franka灵巧手和UR5e双臂；10次/任务中无需任务特化的shirt folding为0.92，100条新本体示范两任务平均0.90，长时laundry folding经Stage 3达0.4。官方代码和Stage-1动作专家权重已开放，但完整DexVLA VLA checkpoint、100小时训练集、任务数据与实机日志没有开放；仓库许可证为非商业条款，HF权重许可还需逐卡核对。因此列为十亿参数动作专家技术改进版，不越级成严格里程碑。

实机证据：quantified_multi_embodiment_ten_trials_per_task_author_evaluation；多任务均按10次报告平均评分；新本体两任务各约100条示范，平均0.90；shirt folding无需任务特化0.92，Stage1/2单独训练均为0；laundry folding经Stage3为0.4。所有实体结果由作者团队给出，无独立同协议复现。

硬件/本体：AgileX bimanual robot、Franka plus dexterous hand, 12DoF、bimanual UR5e、single NVIDIA A6000、10-15Hz collected data and 60Hz control

红旗与边界：完整DexVLA端到端权重未发布；论文100小时训练混合和任务数据未发布；代码限制商业使用；HF动作专家与示例数据许可证不清；每任务仅10次作者评测；单A6000训练仍需20–38GB显存并依赖CPU offload/LoRA权衡；无独立复现

查看资源 · code · 状态 source_available_noncommercial · 许可证 Creative Commons Attribution-NonCommercial-style repository license; commercial use prohibited
固定提交含Stage2/3训练、HDF5转换、DiVLA/ScaleDP路径和A6000显存表；无自动化测试。
查看资源 · weights · 状态 verified_stage1_action_expert_only_not_full_dexvla · 许可证 artifact license not clearly declared; repository noncommercial terms apply at minimum
官方仓库链接ScaleDP-H约1B与ScaleDP-L约400M Stage1动作专家；这不是带Qwen2-VL、本体对齐和任务后训练的完整DexVLA checkpoint。
查看资源 · data · 状态 verified_example_only · 许可证 artifact license not clearly declared
仅提供可跑通HDF5管线的示例数据；论文100小时跨本体数据、各任务100/200条示范与实机评测日志未发布。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-07-22。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。