论文记录 · 证据边界公开

Scaling Sim-to-Real Reinforcement Learning for Robot VLAs with Generative 3D Worlds

arXiv technical report · 2026-03-19 · Sim-to-real

论文元数据

作者: Andrew Choi、Xinjie Wang、Zhizhong Su、Wei Xu
机构: Horizon Robotics
发布日期精度: 日
研究方向: Sim-to-real
机器人: Interbotix WidowX 250S
DOI: 未披露
arXiv: 2603.18532
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 存在链接线索，尚未核验官方性与可运行性
权重: 未核验
数据: 未核验
许可证: 许可证条款已核验（不等于可商用）

当前实践优先级

高潜待持续验证 · 75/100 · 0–6 个月

路线标签：近期热门、生成式Sim-to-real颠覆性分支·3D世界扩展VLA RL·240次实机·训练栈未开放

社区证据类型：尚无独立社区验证

该路线用生成式3D资产与交互场景扩大VLA RL覆盖，在12场景240次WidowX试验中把完整成功率从21.7%提高到75%；官方EmbodiedGen只开放环境侧引擎并明确排除训练代码，且论文只覆盖pick-and-place，现阶段应作为高潜路线而非可复制方案。

近期窗口 · 35/35
发布距评分基准日 4 个月，落入 0–6 个月窗口。
社区可复查验证 · 3/25
EmbodiedGen环境引擎固定commit可检查，但论文RL、场景集和实机系统没有独立复现。
跨领域技术创新 · 20/20
连接语言/图像到3D生成、物理可交互场景、VLA初始化、flow-policy RL、域随机化和sim-to-real。
量化实机证据 · 10/10
12个物理场景、基线与N=100策略各10次，共240次并报告完整/部分成功、时长和两类失败率。
开放与可复现 · 2/5
环境侧代码可取，但文档明确不含训练代码，论文权重/场景/轨迹缺失，固定仓根许可证作用域也有歧义。
工程实用增量 · 5/5
生成场景能系统扩展视觉与物理变化，但单场生成约47分钟、8×RTX6000 Ada五天训练和外部API漂移仍昂贵。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；开放与复现条件不足；精确RL训练代码、checkpoint、场景/资产清单和实机栈未开放；固定仓引用但缺失根LICENSE/NOTICE，许可作用域需澄清；只有桌面pick-and-place，不能外推到人形、灵巧手或移动操作；N=100只有单次训练结果；无独立复现

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

已终审工程资源

官方代码 · 许可证 Apache-2.0 declared in pyproject and docs/documentation/LICENSE; root README license path is stale · 最近核验 2026-07-22
依赖：Python 3.10 or 3.11、SAPIEN and ManiSkill、GPU-backed generation services or configured external generators、source-specific credentials for optional generation APIs、robot and scene asset dependencies with separate licenses；硬件/传感器：single RTX 4090 reported at 46.8 plus or minus 5.0 minutes per generated scene、approximately two minutes per scene when reusing the asset library、paper RL used eight RTX 6000 Ada GPUs for five days but that training path is absent；实机证据：The paper reports 240 WidowX 250S trials, but this artifact contains the environment-generation dependency rather than the policy training or physical deployment system.；开放范围/限制：Record this as reusable environment infrastructure only. Do not mark exact paper training, checkpoints, scenes, assets or physical evaluation reproducible, and resolve the missing root license files before redistribution.

“官方”表示归属与论文关系已核验；仍应按所列依赖、硬件和许可证复现。

每日候选人工终审

该工作把生成式3D世界从资产演示推进到VLA强化学习训练分布：用EmbodiedGen和语言场景设计器生成100个场景、516个独特物体，单RTX 4090顺序生成每场景46.8±5.0分钟，85%场景经人工检查可直接用于RL；8×RTX 6000 Ada训练5天后，100场景策略在生成场景由9.7%提高到79.8%，在未训练的SimplerEnv由23.7%提高到74.3%。实机WidowX 250S在12场景对基线和RL各10次，共240次，成功率21.7%提高到75%，动力学失败66.7%降到18.3%，语义失败18.3%降到6.7%。这是一条反共识高收益路线：不是把VLA继续在少量真实场景过拟合，而是用生成式场景扩大RL分布。Horizon官方EmbodiedGen V2仓已经把论文列为closed-loop robot learning证据，并开放环境生成、SAPIEN/ManiSkill并行环境与资产数据；但文档明确training code is not part of this repository，论文的OpenPI π0.5/PPOFlow、100场景清单、516资产版本、训练checkpoint和实机部署均未开放。故应作为生成式sim-to-real颠覆分支重点跟踪，而不能把EmbodiedGen环境仓当成论文复现仓。

实机证据：quantified_author_240_trial_WidowX_sim_to_real_evaluation；12个实体场景，模仿基线和N=100 RL策略各10次，共240次。部分成功45%到88.3%，完整成功21.7%到75%，完成时间11.5秒到10.2秒，动力学失败66.7%到18.3%，语义失败18.3%到6.7%。只覆盖桌面pick-and-place。

硬件/本体：Interbotix WidowX 250S、Logitech C922 external webcam、RTX 4090 real-world inference、5Hz control、PD control with gravity compensation

红旗与边界：精确RL训练代码、checkpoint、场景清单、资产版本和实机栈均未开放；EmbodiedGen V2文档明确training code is not part of this repository；固定仓pyproject声明根LICENSE/NOTICE，但根文件缺失，许可证作用域需澄清；训练使用8×RTX 6000 Ada持续5天，复现成本高；实验只覆盖WidowX桌面pick-and-place，不能外推到灵巧手、人形或长时移动操作；100场景策略只有单次训练结果，N<=50才有三独立run；生成依赖GPT-4o质量检查与外部生成模型，API成本和版本漂移需控制；无独立团队复现

查看资源 · code · 状态 official_upstream_EmbodiedGen_environment_engine_only_not_the_paper_RL_training_stack · 许可证 pyproject declares Apache-2.0 and docs/documentation/LICENSE contains Apache-2.0; root LICENSE/NOTICE referenced by pyproject are absent at fixed commit, so scope requires clarification
固定commit 011d815的EmbodiedGen V2开放语言/图像到3D资产、交互场景、SAPIEN/ManiSkill并行环境和多模拟器导出，并在机器人学习文档直接链接本论文；同一文档明确论文训练代码不在仓库。它是可复用环境侧依赖，不是π0.5/PPOFlow训练复现包。
weights · 状态 no_exact_VLA_RL_policy_value_or_scene_generator_revision_checkpoints_released_for_the_paper · 许可证 No paper model card or weight license
EmbodiedGen自身模型/服务与论文RL策略是不同制品；没有N=100策略、πpre、value/noise heads、训练run或论文固定生成后端权重。
data · 状态 no_fixed_release_of_100_training_scenes_516_assets_rollouts_or_physical_trials · 许可证 No paper dataset license
EmbodiedGenData是上游通用数据入口，但没有核到论文100场景、516资产、场景划分、RL轨迹、240次实机日志及其固定版本和许可证。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-07-22。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。