论文记录 · 证据边界公开

FlashSAC: Fast and Stable Off-Policy Reinforcement Learning for High-Dimensional Robot Control

arXiv · 2026-04-06 · 操作

论文元数据

作者: Donghu Kim、Youngdo Lee、Minho Park、Kinam Kim、I Made Aswin Nahendra、Takuma Seno、Sehee Min、Daniel Palenicek、Florian Vogt、Danica Kragic、Jan Peters、Jaegul Choo、Hojoon Lee
机构: 机构尚未补齐
发布日期精度: 日
研究方向: 操作
机器人: 未关联具体机器人
DOI: 未披露
arXiv: 2604.04539
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验开放
权重: 未核验
数据: 未核验
许可证: 许可证条款已核验（不等于可商用）

当前实践优先级

高潜待持续验证 · 69/100 · 0–6 个月

路线标签：近期热门、可能成为新主流、高维Off-policy机器人控制主流技术2.0·可能成为新主流

社区证据类型：尚无独立社区验证

在60多任务、10仿真器上把SAC扩展到高维灵巧手与人形，并把G1平地/楼梯训练从PPO小时级压到分钟/数小时；MIT完整框架真开，当前最值得做本地A/B，但无预训练G1策略、真机成功率或独立复现。

近期窗口 · 35/35
发布距评分基准日 3 个月，落入 0–6 个月窗口。
社区可复查验证 · 0/25
仓库较新，未发现固定版本、训练曲线和真机结果齐全的独立复现。
跨领域技术创新 · 20/20
SAC扩展规律、范数稳定化、时间相关探索、高维灵巧操作与人形sim-to-real统一。
量化实机证据 · 4/10
披露G1训练时间和楼梯几何，但没有trial分母或成功率。
开放与可复现 · 5/5
固定MIT提交含完整算法和多仿真器链路；无预训练策略且部分extra冲突。
工程实用增量 · 5/5
统一超参、单GPU基准、明确安装与训练命令，适合直接替换PPO做公平消融。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；量化实机证据不足；无预训练G1策略；真机无trial分母；仿真器条件异构；extra依赖冲突；无硬件日志；无独立复现

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

已终审工程资源

官方代码 · 许可证 MIT repository; Isaac Lab, Isaac Sim, MuJoCo Playground, ManiSkill, Genesis, HumanoidBench, MyoSuite, Meta-World, D4RL, robot assets and other dependencies retain upstream terms · 最近核验 2026-07-22
依赖：Ubuntu 22.04 with Python 3.10 for RTX 30/40 series or Ubuntu 24.04 with Python 3.11 for Blackwell、CUDA 12, PyTorch, JAX, Gymnasium, Hydra and uv、MuJoCo and DeepMind Control Suite by default、optional Isaac Lab/Isaac Sim, MuJoCo Playground, ManiSkill, Genesis, HumanoidBench, MyoSuite and Meta-World extras、Isaac Lab must use a separate environment from Genesis or HumanoidBench because the repository declares dependency conflicts、MuJoCo Playground has a documented JAX greater-than-0.5.2 collapse risk and may fail with Python 3.11；硬件/传感器：paper benchmark timing measured primarily on a single NVIDIA RTX 5090、4096 IsaacLab environments and one NVIDIA A100 for the reported four-hour G1 rough-terrain policy、Unitree G1 29-DoF physical humanoid、50Hz policy, 200Hz low-level PD, ROS 2 and Unitree SDK；实机证据：The authors report stable flat-ground G1 locomotion after about 20 minutes versus about 3 hours for PPO, and unseen-stair capability after about 4 hours versus nearly 20 hours for PPO.、The physical stair is 15cm high and 60cm wide with a 1.5m platform; no repeated-trial denominator, success rate, confidence interval or downloadable G1 checkpoint is provided.；开放范围/限制：The fixed repository is sufficient to inspect and run the algorithm and configured simulators, but cross-simulator dependencies are not a single conflict-free install. It does not provide the paper's pretrained G1 policies, replay buffers or hardware logs, and no independent team reproduction meets the evidence threshold.

“官方”表示归属与论文关系已核验；仍应按所列依赖、硬件和许可证复现。

每日候选人工终审

FlashSAC通过大回放池、大模型大batch少更新、范数约束和时间相关噪声，让off-policy SAC在60多项、10个仿真器的高维控制上稳定扩展。Unitree G1盲式平地约20分钟达到可部署步态，对照PPO约3小时；15cm未见楼梯约4小时，对照约20小时。官方MIT仓库固定提交含完整训练框架和多仿真器配置，但没有发布论文真机策略、真机trial分母或独立复现；不同仿真器依赖相互冲突，不能把项目视频等同于可直接下载的G1权重。

实机证据：qualitative_unitree_g1_with_quantified_training_time_but_no_trial_denominator；平地约20分钟、PPO约3小时；15cm高/60cm宽、平台1.5m的未见楼梯约4小时、PPO约20小时。论文和项目均未报告重复试验次数、成功率或置信区间。

硬件/本体：Unitree G1 29-DoF、4096 IsaacLab environments、single NVIDIA A100 for the reported 4-hour rough-terrain policy、50 Hz policy and 200 Hz PD controller、ROS 2 and Unitree SDK

红旗与边界：真机无trial分母；没有预训练策略；IsaacLab与Genesis/HumanoidBench依赖冲突；仿真器之间实验条件异构；平地/楼梯能力以时间到达而非成功率衡量；无独立复现

查看资源 · code · 状态 open_source · 许可证 MIT repository; simulators, robot assets, task suites and optional dependencies retain upstream terms
固定提交180个blob/120,661,769字节，含FlashSAC实现、Hydra配置、训练/评测入口和多仿真器适配。
weights · 状态 no_pretrained_policy_files_found · 许可证 not_disclosed
仓库提供检查点保存/加载代码，但固定树中未发现.pt/.pth/.ckpt/.onnx预训练策略。
data · 状态 benchmark_results_present_but_training_and_hardware_logs_not_released_as_dataset · 许可证 not_disclosed
仓库含结果资产，但没有版本化真机日志、完整训练回放或可独立核验的策略数据集。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-07-22。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。