论文记录 · 证据边界公开

RMBench: Memory-Dependent Robotic Manipulation Benchmark with Insights into Policy Design

arXiv preprint (under review) · 2026-03-01 · 通用或轻量 VLA

论文元数据

作者: Tianxing Chen、Yuran Wang、Mingleyang Li、Yan Qin、Hao Shi、Zixuan Li、Yifan Hu、Yingsheng Zhang、Kaixuan Wang、Yue Chen、Hongcheng Wang、Junjie Wang、Tianhang Yang、Renjing Xu、Ruihai Wu、Yao Mu、Yaodong Yang、Hao Dong、Ping Luo
机构: MMLab@HKU、Peking University、PsiBot、HKUST (GZ)、Tsinghua University、Shanghai Jiao Tong University
发布日期精度: 日
研究方向: 通用或轻量 VLA
机器人: RoboTwin 2.0 simulated dual-arm embodiments、X-One dual-arm robot
DOI: 10.48550/arXiv.2603.01229
arXiv: 2603.01229
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验可访问（使用限制见许可证）
权重: 已核验可访问（使用限制见许可证）
数据: 已核验可访问（使用限制见许可证）
许可证: 部分制品许可证缺失/待澄清

当前实践优先级

当前可实践 · 66/100 · 4–6 个月

研发注意力：48/80 · 证据分项观察

工程落地：13/15 · 量化实机证据＋工程实用增量

标准分类标签：主流迭代

路线评审说明：主流VLA技术迭代·任务记忆基准·双臂真机作者验证·开放制品待独立复现

社区证据类型：尚无独立社区验证

RMBench 把机器人策略的历史依赖转化为可分层比较的 Task Memory Complexity：同一 RoboTwin 2.0/SAPIEN 任务、动作接口、数据切分和 rollout 分母下，分别评估 M(1) 与 M(n) 记忆难度；同时公开了 MIT 代码、处理后的 LeRobot 数据、重训 checkpoint、配置和日志。它有 X-One 双臂三任务、每任务 100 条示范和每策略 40 次 rollout 的作者实机对照，但真实平均成功率仅 22.5%、checkpoint 与论文版本需逐项对齐且没有独立复现。故进入近期 VLA/记忆路线的高潜持续核验层，不作为人形、移动操作、通用生产部署或社区验证结论。

近期窗口 · 28/35
发布距评分基准日 5 个月，落入 4–6 个月窗口。
社区可复查验证 · 0/25
官方仓公开安装、下载与评测路径及 issue/fork 线索，但未找到无关团队以固定 commit、同一 RoboTwin 2.0 协议或 X-One 平台复跑并公开成功/失败分母的复现；不授予社区验证。
跨领域技术创新 · 20/20
将任务记忆复杂度、显式 anchor/sliding/key memory、VLA/DiT 动作策略、RoboTwin 2.0 双臂基准、处理数据制品和作者实体试验连成统一比较链；未证明导航、触觉、人形全身、轮足或跨机器人迁移。
量化实机证据 · 8/10
X-One 双臂 Put Back Block、Rearrange Blocks、Cover Blocks 各采 100 条真机示范，并以每策略每任务 40 次 rollout 报告 Mem-0 17.5/37.5/12.5%、ACT 0%、pi0.5 10/7.5/0%；作者单平台且真实平均仅 22.5%，没有独立复验或原始实机日志。
开放与可复现 · 5/5
官方仓为 MIT，公开 envs、policy、task_config、安装/下载/评测路径；M(1) 处理 LeRobot 数据卡为 Apache-2.0，并有 checkpoint、配置和日志。M(n) 制品、RoboTwin 资产、上游依赖和项目专属 checkpoint 许可证仍需分别核验。
工程实用增量 · 5/5
明确 Python 3.10、RoboTwin 2.0、CuRobo、Qwen3-VL-2B-Instruct、16-D action、30-step chunk、数据重组 SHA-256 和 100-episode 仿真日志路径，可先做受控仿真复验；统一 GPU/显存门槛、完整实体硬件/标定、端到端时延、安全链与跨版本等价性未披露。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；没有独立团队按固定 commit、相同任务切分和 rollout 分母复现 M(1)/M(n) 或 X-One 实机结果；论文早期 checkpoint 未备份后重训，论文表、当前 checkpoint、模型卡、日志与哈希需要逐版本对齐；真机只限 X-One 双臂且平均成功率 22.5%，不可外推为人形、轮臂、轮足、导航、触觉或生产可靠性；RoboTwin 资产、上游模型和项目专属 checkpoint 的具体许可、GPU/显存、实体相机/控制/安全配置仍不完整

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

每日候选人工终审

RMBench 将“历史窗口长度”从模型私有实现问题提升为任务级 Task Memory Complexity（TMC），在 RoboTwin 2.0/SAPIEN 中给出 5 个 M(1) 与 4 个 M(n) 双臂任务，并把 Mem-0 的 anchor、sliding 与 key memory 拆成可消融模块。这一类基准对比较 VLA、WAM 与显式记忆策略有实用价值：只有在同一任务、demo_clean、指令泛化、动作空间、训练数据和 rollout 分母下，才可谈记忆架构增益。官方仓 MIT、安装/数据脚本公开；2026-07-14 起公开了重训的 M(1)/M(n) checkpoint、M(1) 数据、配置与评测日志，但 checkpoint 归档和部分上游资源仍需下载/重组，模型卡未给这个微调制品的独立许可证。论文还给出 X-One 双臂三任务、各 100 条真机示范和每任务 40 rollout 的作者实体结果（Mem-0 平均 22.5%，ACT 0%，pi0.5 5.83%）；分数很低且无独立复现，不能列为通用 VLA 部署能力。它进入“机器人记忆／主流 VLA 迭代／近期热门”的深审横评与重点观察，不提升为确认里程碑。

实机证据：author_quantified_xone_dual_arm_three_task_trials_without_independent_reproduction；Put Back Block、Rearrange Blocks、Cover Blocks 三项，每项收集 100 条真机示范，训练后每策略 40 rollout。Mem-0 成功率 17.5/37.5/12.5%，平均 22.50%；ACT 0%，pi0.5 5.83%。这证明作者平台上有限、困难的记忆任务差异，不证明人形、轮臂、跨本体、跨场景或生产可靠性。

硬件/本体：X-One dual-arm robotic platform

红旗与边界：项目处于 under review，论文结论尚未经过同行评审定稿；模拟 benchmark 与 X-One 双臂真机不能作为人形或移动操作性能证据；M(n) 高难任务总体和 Press Button 成绩低，不能只展示 M(1) 最优数；公开 checkpoint 的项目专属许可未明确；上游 Qwen/RoboTwin/资产条款须分别遵守；早期 checkpoint 未备份并已重训，版本、论文表和当前模型卡的结果可能不一致；无独立实机复现、跨本体、跨场景、触觉或视觉遮挡鲁棒性报告

项目关系/同名消歧：arxiv-2608-09410
与 HyMeS、MemoryVLA、MemER、CronusVLA、SAM2Act 同属记忆依赖操作比较族，但 RMBench 是任务/评测基础设施并附 Mem-0，不应同架构参数量或单一成功率直接排名。按 arXiv ID、标题、作者、RoboTwin 2.0 九任务与 X-One 实验检查后未发现同项目的 canonical 记录。

查看资源 · paper · 状态 verified_primary_v3_identity_revision_and_scope · 许可证 arXiv perpetual non-exclusive distribution license
v1 于 2026-03-01 提交，v3 于 2026-07-30 修订；正文确认 9 个记忆任务、TMC、RoboTwin 2.0/SAPIEN、Mem-0 及 X-One 试验。
查看资源 · paper_html · 状态 verified_primary_v3_protocol_metrics_and_real_robot_denominator · 许可证 CC BY 4.0 for rendered paper
全文确认实体三任务各 100 条示范、各方法每任务 40 次 rollout；Mem-0 17.5/37.5/12.5%，ACT 0/0/0%，pi0.5 10/7.5/0%。
查看资源 · project · 状态 verified_official_author_project_page · 许可证 project-page license not disclosed
论文与仓库均链接到作者项目页。
查看资源 · code · 状态 verified_official_source_available · 许可证 MIT
公开仓含 envs、policy、data、task_config、collect_data.sh 与安装/下载/评测路径；README 指定 Python 3.10、CuRobo、RoboTwin 2.0。
查看资源 · weights · 状态 verified_public_m1_checkpoint_with_logs_and_config · 许可证 repository-specific fine-tuned checkpoint license not explicitly stated; bundled/upstream Qwen component is Apache-2.0
公开 M(1) 2.67B Mem-0 checkpoint、配置、normalization、100 episode/task 日志和视频；完整训练 checkpoint 15.3GB 分为 9 个文件，需重组并校验 SHA-256。M(n) 各任务 checkpoint 入口另见官方仓链接。
查看资源 · weights · 状态 verified_public_per_task_mn_checkpoint_entry · 许可证 repository-specific checkpoint license not explicitly stated
官方 README 说明 battery_try、blocks_ranking_try、cover_blocks 与 press_button 的执行模块 checkpoint、normalization 与评测结果已公开；未把页面可访问性误记为完整训练可复现。
查看资源 · data · 状态 verified_public_processed_m1_lerobot_dataset · 许可证 Apache-2.0 on dataset card; RoboTwin assets and upstream dependencies retain their own terms
数据卡显示 Parquet/LeRobot、92.5k train rows、状态/动作/子任务/episode/time 等字段；仅确认该 M(1) 处理数据公开，不推断全部九任务、真机示范或上游资产都以同一许可发布。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-08-14。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。