论文记录 · 证据边界公开

FACT: Failure-Aware Causal Training for World-Action Models

arXiv · 2026-08-10 · world-models

论文元数据

作者: Quanquan Peng、Yutong Liang、Rui Yan、Nicklas Hansen、Xiaolong Wang
机构: University of California San Diego
发布日期精度: 日
研究方向: world-models
机器人: GELLO teleoperation、Intel RealSense D435 main camera、RoboTwin 2.0 simulated bimanual platform、RoboTwin simulated bimanual platform、two Intel RealSense D405 wrist cameras、two YAM arms
DOI: 10.48550/arXiv.2608.10232
arXiv: 2608.10232
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验可访问（使用限制见许可证）
权重: 已核验可访问（使用限制见许可证）
数据: 已核验可访问（使用限制见许可证）
许可证: 许可证条款已核验（不等于可商用）

当前实践优先级

高潜待持续验证 · 69/100 · 0–1 个月

研发注意力：53/80 · 近期跨域高潜·社区待验证

工程落地：12/15 · 量化实机证据＋工程实用增量

标准分类标签：主流迭代、可能成为新主流

路线评审说明：失败感知因果世界动作模型主流迭代·双臂真机·社区待验证

社区证据类型：尚无独立社区验证

把失败动作保留为未来视频和任务进度的后果监督，而不让它污染动作模仿目标；RoboTwin 50任务与双臂实机都给出定量作者证据。固定提交已公开仿真训练、推理和闭环评测，且有非门控 checkpoint 与仿真数据；这使其成为可复查的实验框架，但不补足真实双臂部署闭包、端侧时延或独立复现，不能当作现成生产工程方案。

近期窗口 · 35/35
发布距评分基准日 0 个月，落入 0–1 个月窗口。
社区可复查验证 · 0/25
固定 Apache-2.0 提交、非门控 checkpoint 和 MIT 仿真数据均可检查，但均属作者官方制品，不计入社区分；仍无独立团队在明确硬件/指标下的复现。
跨领域技术创新 · 18/20
把失败轨迹的因果后果学习、视频未来预测、任务进度价值、生成式动作策略与多视角双臂操作合并；但尚未证明跨机器人或人形本体迁移。
量化实机证据 · 8/10
两台 YAM 双臂的五个见过任务、三个未见变体，每个表格单元20次；失败训练单样本均值89%/77%。可选 N=4 分别为92%/82%，不按单样本实机证据计满。
开放与可复现 · 4/5
固定 Apache-2.0 提交提供 RoboTwin 训练、推理与闭环评测路径；HF 提供非门控 Apache-2.0 checkpoint 和 MIT 仿真数据。真实双臂驱动、标定、失败轨迹、部署/安全闭包与独立复现仍未公开。
工程实用增量 · 4/5
原文给出 Wan2.2-5B 初始化、H=48、四个未来偏移和20步 flow Euler；但无训练 GPU、端侧时延、控制频率、安全边界和发布实现。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；真实双臂驱动、传感器标定、失败轨迹、部署/安全闭包和独立复现未公开；无独立团队复现、部署报告、原始日志或失败视频；N=4 候选评分与单样本推理成本不可直接混比；未见评测仅对象/指令变体，未覆盖跨机器人、人形全身或开放世界；未披露训练加速器、端侧控制频率、时延、动作空间、标定和安全边界

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

每日候选人工终审

FACT 是近期 WAM 的失败后果学习分支：同一个因果扩散 Transformer 先产生动作，再以该动作条件预测未来视频与任务进度；失败 rollout 不参与动作模仿，却持续监督失败未来和较低进度。其价值在于把“只看成功演示”的乐观世界预测转为可检查的失败因果监督。论文在 RoboTwin 50 任务中报告失败共训练后87.5%，并在真实双臂五个已见任务、三个物体/指令变化的未见任务中以每单元20次协议报告89%/77%，可选候选打分为92%/82%。作者已公开 Apache-2.0 训练、推理、RoboTwin 闭环评测代码，非门控 Apache-2.0 checkpoint 与 MIT RoboTwin 数据；不过公开代码的实机段仅覆盖仿真，论文未发布真实双臂硬件、传感器标定、采集失败轨迹、真实部署客户端、任务重置、安全闭环或独立实机复现。因此应作为“WAM主流技术2.0／失败数据因果分支／可复现实验框架／真机待独立验证”进入横评，而非直接列为人形或生产真机方案。

实机证据：author_reported_real_bimanual_seen_and_object_instruction_variant_protocol_twenty_trials_per_cell_no_independent_reproduction；论文附录明确为两台 YAM 机械臂、1台 D435 主视角、2台 D405 腕部相机和 GELLO 遥操作；每个表格单元为20次均值。五个已见任务中 FACT+failure 为89%、加可选N=4候选打分为92%；三个物体颜色/形状/指令变化的未见任务为77%/82%。未公开真实数据、失败轨迹、完整原始日志、标定、实时频率、安全措施或独立团队复现。

硬件/本体：two YAM arms、Intel RealSense D435 main camera、two Intel RealSense D405 wrist cameras、GELLO teleoperation

红旗与边界：开源闭环覆盖 RoboTwin 仿真，不等于公开论文真实双臂部署或失败数据闭包；论文真机平台仅称双臂系统，未发布型号、控制频率、驱动、标定、相机位姿、采集协议或安全恢复；未见独立团队以固定 FACT 提交、HF revision 和对等真机协议复现；stars、作者视频和项目页互链不计入社区验证；未见任务仅同一机器人下的物体颜色/形状和指令变化，不能外推为跨本体、触觉、足式、人形、轮臂、轮足或户外泛化；Apache-2.0 仅覆盖 FACT 代码/checkpoint 卡明示范围；Wan2.2、RoboTwin、上游数据、真实硬件及其依赖均需单独遵守各自条款

查看资源 · paper · 状态 verified_arxiv_v1_primary_identity_and_manuscript_license · 许可证 CC-BY-NC-ND-4.0 for arXiv manuscript
arXiv 记录作者、2026-08-10 v1、摘要、代码/项目链接与论文文本许可；论文文本许可不等于软件、权重或数据许可。
查看资源 · project · 状态 verified_official_author_project_page_and_autonomous_demo_relation · 许可证 not declared for project page media
项目页与论文作者、arXiv 和 GitHub 互链，并展示五个已见和三个未见真实双臂任务；视频和作者总结不替代可下载真机闭包或独立复现。
查看资源 · code · 状态 verified_public_official_end_to_end_RoboTwin_training_inference_and_closed_loop_evaluation · 许可证 Apache-2.0
固定提交含 world_action_model、训练/数据 harness、setup_env、预处理、训练、推理 server 与 RoboTwin 50任务闭环评测脚本。它不含论文真实双臂的机器人驱动、标定、任务采集、失败 rollout、重置、急停或安全部署闭包。
查看资源 · weights · 状态 verified_public_non_gated_official_checkpoint_distribution · 许可证 Apache-2.0
Hugging Face API 核验公开、非 gated 模型仓，revision 887f66bc0be860ede339bb2843fb3c79a8553278，含 transformer 权重、配置和归一化统计。该 checkpoint 面向发布的 RoboTwin 路线，不证明论文真实双臂模型、商用适配或跨本体可用。
查看资源 · data · 状态 verified_public_non_gated_official_RoboTwin_demonstration_distribution · 许可证 MIT
Hugging Face API 核验公开、非 gated 数据集，revision bab58f64763ec54891931748214fb91434af8ef2，分发 robotwin-v2.tar。它是仿真演示数据，不含论文真实双臂数据、失败 rollout、真实传感器同步/标定、隐私说明或真机许可证。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-08-14。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。