论文记录 · 证据边界公开

ExToken: Structured Exploration for Efficient Vision-Language-Action Reinforcement Fine-tuning

arXiv · 2026-07-14 · 通用或轻量 VLA

论文元数据

作者: Yilun Kong、Yunpeng Qing、Guozheng Ma、Haoyu Wang、Li Shen、Zhi Hou、Dacheng Tao
机构: Nanyang Technological University、ACE Robotics、Zhejiang University、Sun Yat-sen University
发布日期精度: 日
研究方向: 通用或轻量 VLA
机器人: 未关联具体机器人
DOI: 未披露
arXiv: 2607.12931
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 未核验
权重: 未核验
数据: 未核验
许可证: 未核验

当前实践优先级

高潜待持续验证 · 69/100 · 0–6 个月

路线标签：近期热门、VLA强化学习反共识高收益路线

社区证据类型：尚无独立社区验证

用示范聚类的行为 token 提升探索多样性，在固定交互预算和 Cobot Magic OOD 上持续增益；HIL与8×A800成本高且无本文实现，列高潜。

近期窗口 · 35/35
发布距评分基准日 0 个月，落入 0–6 个月窗口。
社区可复查验证 · 0/25
无 ExToken 实现、token/数据、checkpoint 或独立同协议结果。
跨领域技术创新 · 20/20
把视频表征聚类、离散行为先验、token 条件 VLA-RL 和状态 selector 结合为结构化探索。
量化实机证据 · 10/10
Cobot Magic 四任务、四环境条件、每格20次；但训练 rollout 有 HIL 修正。
开放与可复现 · 0/5
仅基础 OpenPI/Evo-RL 可用，本文 selector、训练配置、权重和数据未开放。
工程实用增量 · 4/5
LIBERO固定512 rollout/step和实体20 rollout/iteration量化了交互效率，但算力成本仍高。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；开放与复现条件不足；HIL训练收集；8×A800；每任务聚类；无本文代码；无权重数据；无独立复现

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

每日候选人工终审

ExToken 从离线示范的视频嵌入聚类出离散探索 token，让 VLA-RL 主动覆盖不同行为模式，并在部署时由状态条件 selector 选 token。相同 512 rollout/step 预算下 LIBERO 平均 98.2% 对 RLinf-GRPO 96.8%；Cobot Magic 四项实体、每格 20 次中，原场景和三类 OOD 均优于 π0.5/Evo-RL。它是“多样性比 rollout 数量更重要”的反共识高收益路线，但实机数据收集包含 HIL 修正，训练需 8×A800，论文自身没有官方代码/权重/数据链接，只有依赖的 OpenPI/Evo-RL 可开源，不能把基础仓库当作 ExToken 实现。

实机证据：quantified_cobot_magic_author_trials_with_hil_training_collection；四任务×原场景/未见物体/背景/灯光×20 次，共 320 次/模型。ExToken 原场景平均 92.5%，Evo-RL 86.25%；全部 16 格均不低于 Evo-RL。Fold 用 200 warm-up 轨迹与两轮×20 rollout，其他任务各 100 warm-up 轨迹与一轮×20 rollout；探索收集允许 HIL 修正，因此不等于完全自主在线 RL。

硬件/本体：Cobot Magic、four AgileX Piper arms、π0.5、single A800 inference、8×A800 training

红旗与边界：实机训练采集包含 HIL 修正；训练需 8×A800，不能称低算力；selector 依赖预训练视频编码器和每任务聚类；没有 ExToken 官方代码、权重或数据；实体评测仍是作者团队单平台；无独立复现

code · 状态 no_official_extoken_implementation_found · 许可证 not_disclosed
论文只链接 Physical-Intelligence/openpi 等依赖；官方论文、GitHub 精确题名与作者线索均未给出 ExToken 实现。基础框架开源不能推导出本文 token selector、训练损失和实验配置已开放。
weights · 状态 not_released · 许可证 not_disclosed
LIBERO、Cobot Magic、token selector 和 π0.5 适配权重未发布。
data · 状态 real_robot_warmup_and_rollout_data_not_released · 许可证 not_disclosed
四项任务的 500 条 warm-up 轨迹、HIL 修正、探索 rollout、失败日志和 token 聚类未开放。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-07-21。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。