论文记录 · 证据边界公开

OSCAR: Omni-Embodiment Action-Conditioned World Model for Robotics

arXiv technical report · 2026-06-03 · 世界模型与动作条件预测

论文元数据

作者: Zhuoyuan Wu、Jun Gao
机构: 机构尚未补齐
发布日期精度: 日
研究方向: 世界模型与动作条件预测
机器人: AgiBot G1 humanoid、DROID Franka platform、Franka Panda、KUKA iiwa、Toyota HSR mobile manipulator、human MANO hand skeleton
DOI: 未披露
arXiv: 2606.04463
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验可访问（使用限制见许可证）
权重: 已核验可访问（使用限制见许可证）
数据: 已核验可访问（使用限制见许可证）
许可证: 许可证条款已核验（不等于可商用）

当前实践优先级

高潜待持续验证 · 68/100 · 2–3 个月

研发注意力：55/80 · 近期跨域高潜·社区待验证

工程落地：10/15 · 量化实机证据＋工程实用增量

标准分类标签：颠覆性分支、可能成为新主流

路线评审说明：跨本体WAM颠覆性分支·开放推理与权重·实机回放对照

社区证据类型：尚无独立社区验证

OSCAR 以2D运动学骨架统一 Franka Panda、KUKA iiwa、AgiBot G1、人手与 Toyota HSR 的动作条件，把2B视频世界模型用于跨本体预测和策略排序评估。Apache-2.0推理代码、公开权重与441条真实执行对照回放提供可检查入口；但训练配方和完整数据未开放，公开实机材料是离线回放对照而非闭环控制成功率，也没有独立复现。因此列为高潜待持续验证的WAM评估分支，不标为社区验证、实时控制方案或里程碑。

近期窗口 · 32/35
发布距评分基准日 2 个月，落入 2–3 个月窗口。
社区可复查验证 · 4/25
论文、官方项目页、Apache-2.0推理仓、公开模型卡与441条对照回放均可复查；这些均为作者一手发布，未发现独立团队以不同机器人、硬件或固定配置复现端到端指标。
跨领域技术创新 · 19/20
以2D骨架渲染同时连接人手、双臂机械臂、人形G1、移动操作HSR、动作条件视频预测与策略排序评估，形成跨本体世界模型接口；没有证明触觉闭环、导航规划或跨本体策略直接迁移。
量化实机证据 · 5/10
作者在既有DROID Franka/Robotiq真实执行回放上用1,365个成对偏好评估排序一致性，并公开441条对照视频；这构成有分母的物理机器人回放对照，但仍是离线世界模型评估，不是OSCAR动作闭环驱动的实机成功率、控制频率或安全验证。
开放与可复现 · 3/5
官方Apache-2.0推理代码、Apache-2.0模型卡权重、14个基准资产和对照回放可下载；训练脚本、数据筛选去重、完整训练集、标定动作标签、容器和数据许可矩阵未公开。
工程实用增量 · 5/5
Linux x86_64、CUDA 12.4+与24GB以上显存、公开推理仓、权重、基准资产和真实回放共同构成可执行的最小验证入口，适合先复查跨本体视频预测和策略排序；单张GH200仅说明作者微调硬件，Blackwell示例约一分钟，不可当作低成本或实时控制部署承诺。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；无独立团队复现、部署报告或跨实验室失败记录；无训练脚本、完整episode清单、筛选去重管线、标注版本、超参数、随机种子或训练成本；441条公开视频是策略评估对照而非完整训练数据，缺少完整数据卡、相机标定、动作标签和许可证矩阵；无OSCAR闭环真机成功率、控制频率、传感器同步、动作限幅、安全复位或长期可靠性证据；不能把跨本体视频预测与离线排序外推为人形全身、五指触觉、轮臂轮足或跨本体策略迁移

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

每日候选人工终审

OSCAR 用 2D 运动学骨架渲染统一机械臂、人形 G1 和人手的动作条件，把 2B Cosmos-Predict2.5 微调为跨本体视频世界模型，并把生成轨迹用于对 RoboArena 已有实机回放的策略评估。它是近期“世界模型评测器/跨本体条件表示”的重要开源分支：官方已公开 Apache-2.0 推理代码、约 5GB 的 2B 权重和 441 条实机对照回放，且明确列出单卡 GH200 训练和单张 24GB+ 显存 GPU 推理条件。必须同时保留边界：公开仓是推理发布而不是训练仓；训练混合数据的筛选、标注和去重管线没有下载；RoboArena 视频是既有真实执行的离线对照，不能写成 OSCAR 在真机闭环控制或独立实机复现。

实机证据：author_world_model_evaluation_against_existing_real_robot_rollouts_not_new_closed_loop_deployment；论文在四种机器人本体、六个数据子集构成的 200 条视频评测集上比较视频指标；策略评测使用 RoboArena 已有 DROID Franka 实机回放，将 OSCAR 自回归生成视频与真实执行结果配对，并用 1,365 个成对偏好计算与真实排行的一致性。官方另公开 441 条策略回放视频。上述是物理机器人记录与离线世界模型评估证据，不是 OSCAR 生成动作直接驱动机器人完成任务的闭环实机成功率，也没有独立团队复现。

硬件/本体：AgiBot G1 data、DROID Franka/Robotiq RoboArena sessions、Toyota HSR AIROA-MoMa data、Franka Panda and KUKA iiwa data

红旗与边界：训练数据源跨 RH20T、InternData、DROID、AgiBot、AIROA-MoMa、EgoDex 和 EPIC-Kitchens，但公开物未提供完整 episode 清单、筛选/去重重跑管线、标注版本或上游许可兼容矩阵；论文披露一张 GH200 微调，却没有公开训练时长、总成本、完整超参数、随机种子或端到端训练环境；不能据此承诺单卡可完整复训；公开推理推荐 Linux x86_64、CUDA 12.4+ 和至少 24GB 显存，公开示例在 Blackwell 测得约一分钟；这不是低算力或实时控制证明；世界模型评估的真实标签来自 RoboArena 已有回放，视频生成与 GPT-5 裁判链路均可能受校准误差和判定偏差影响；与实机排名的相关性不等于安全或因果精确度；当前没有第三方在不同机器人、相机标定、控制频率或未见任务上完成独立复现

查看资源 · code · 状态 official_apache2_public_inference_code_fixed_public_release_not_training_pipeline · 许可证 Apache-2.0 for the public code repository; upstream Cosmos, datasets and third-party dependencies retain their own terms
公开仓含 inference、worldsim、Diffusers/DiffSynth 包装器、脚本和 14 个基准样例的下载/运行路径，LICENSE 为 Apache-2.0。它明确是 public inference release，未公开训练脚本、训练混合清单、筛选去重代码、标注 prompt/日志、完整 benchmark 构建和容器/CI。
查看资源 · weights · 状态 official_public_ungated_checkpoint_and_assets · 许可证 Apache-2.0 model-card license
官方模型卡公开 OSCAR-2B 分片约 4GB 和 14 个随附基准资产约 500MB，可由 hf download 获取；模型为 Cosmos-Predict2.5-2B 的骨架条件微调。模型卡不等于训练数据、源模型或上游数据的再分发许可。
查看资源 · data · 状态 official_public_real_world_comparison_rollouts_not_training_dataset · 许可证 No explicit dataset-card license or complete source-data redistribution matrix was located
官方公开 441 条 OSCAR 与 RoboArena DROID 实机执行的并排回放（约 1.38GB），可用于复查策略评估的对照视频。该数据集缺少 YAML 元数据，且不是论文 180,657 条筛选训练剧集、相机标定/动作标签或数据清洗产物；不得把它标成完整训练数据开放。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-08-13。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。