论文记录 · 证据边界公开

RSL-RL: A Learning Library for Robotics Research

arXiv preprint · 2025-09-13 · robotics reinforcement-learning training libraries, PPO and teacher-student sim-to-real

论文元数据

作者: Clemens Schwarke、Mayank Mittal、Nikita Rudin、David Hoeller、Marco Hutter
机构: ETH Zurich、NVIDIA、Flexion Robotics
发布日期精度: 日
研究方向: robotics reinforcement-learning training libraries, PPO and teacher-student sim-to-real
机器人: 未关联具体机器人
DOI: 10.48550/arXiv.2509.10771
arXiv: 2509.10771
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验开放
权重: 已核验未发布
数据: 已核验未发布
许可证: 许可证条款已核验（不等于可商用）

当前实践优先级

观察 · 55/100 · 7–12 个月

研发注意力：44/80 · 证据分项观察

工程落地：7/15 · 量化实机证据＋工程实用增量

标准分类标签：主流迭代

路线评审说明：机器人强化学习训练基础设施·GPU/多节点·主流迭代

社区证据类型：尚无独立社区验证

RSL-RL 将 PPO、师生蒸馏、对称增强、RND 与 GPU/多节点批训练统一为可复用训练层，已被人形/足式项目采用；其本身不提供统一任务、权重或真机 benchmark。

近期窗口 · 24/35
发布距评分基准日 11 个月，落入 7–12 个月窗口。
社区可复查验证 · 6/25
论文、BSD 仓库和 PyPI 可复查；无独立框架级真机复现。
跨领域技术创新 · 14/20
将 PPO、师生蒸馏、对称增强、RND 与分布式 GPU 训练统一到机器人训练层。
量化实机证据 · 2/10
仅引用下游既有真机应用，无 RSL-RL 自有统一协议。
开放与可复现 · 4/5
核心代码 BSD-3-Clause 且可固定；环境、资产、权重和数据由下游提供。
工程实用增量 · 5/5
可作为统一训练调度候选，但必须冻结环境、reward、版本和项目锁。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；量化实机证据不足；框架级真机 benchmark 缺失；统一权重/数据/环境不存在；不同仿真器契约未统一；独立复现协议缺失

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

每日候选人工终审

RSL-RL 不是又一个通用 RL 算法集合，而是面向机器人高吞吐仿真的紧凑训练层：官方论文明确其核心为 PPO、DAgger 式 student-teacher behavior cloning、对称增强、RND、GPU-only 批训练与原生多 GPU/多节点支持；论文和 README 均将 Isaac Lab、Legged Gym、mjlab、MuJoCo Playground 列为接入方。它承接 2022 年大规模并行足式训练，已成为人形全身控制、足式 locomotion、导航和 sim-to-real 训练谱系的重要工程节点。当前官方仓可固定到 commit c281c32e，根 LICENSE 为 BSD-3-Clause，PyPI 包与 Python 3.9+ 安装说明可核验。边界同样明确：RSL-RL 本身不发布统一机器人权重、数据集、环境资产或单一硬件真机 benchmark；论文仅概述既有真实机器人研究，不能把 ANYmal、人形、Unitree 或下游框架成绩写成该库的直接实机性能。

实机证据：framework_paper_cites_prior_real_robot_applications_without_a_single_framework_level_hardware_protocol；论文摘要称该库已在仿真基准和真实机器人实验中验证，应用章节列举敏捷运动、全身控制、导航、teacher-student 与模仿学习等既有工作；但没有给出一套由 RSL-RL 本身主导的统一机器人、传感器、控制频率、任务分母、成功率或失败日志。故仅作为训练基础设施实机相关性证据，不能作为该库的独立真机性能排名。

硬件/本体：未披露

红旗与边界：RSL-RL 仅含 PPO 与 DAgger 式 BC 等有限算法，不适合作为通用 RL 算法横评套件，论文也明确不原生支持纯 imitation learning。；GPU-only、VecEnv 同步 reset、TensorDict、PyTorch/CUDA 与环境版本是硬依赖；不同 Isaac/MuJoCo/Genesis 版本和资产许可会造成复跑断裂。；BSD-3-Clause 仅覆盖 RSL-RL 仓；Isaac Lab、Legged Gym、mjlab、MuJoCo Playground、GPU驱动、机器人 SDK、环境资产、数据与任何下游权重不自动继承该许可。；论文没有框架层统一真实机器人协议、任务分母、传感器/计算清单、失败日志或无关团队重复试验，禁止将下游 ANYmal、Unitree 或人形成果归因成 RSL-RL 的直接性能。

查看资源 · paper · 状态 verified_primary_paper_date_authors_methods_and_scope · 许可证 CC-BY-4.0 for the arXiv paper only
arXiv v1 于 2025-09-13 发布，原文说明 PPO、DAgger 式 BC、GPU-only、多 GPU/多节点、仿真/既有真机应用及不适合作为通用算法 benchmark 的边界。
查看资源 · code · 状态 open_source_fixed_commit · 许可证 BSD-3-Clause
官方 leggedrobotics/rsl_rl 的 main 在本次核验时固定为 c281c32e5746e75570c1a29bfa78bca0200cc5ff；README 给出 PPO、Student-Teacher Distillation、多 GPU、PyPI 和下游训练库接口。BSD-3-Clause 只覆盖该仓；环境、机器人 SDK、资产、权重与依赖各有条款。
查看资源 · project · 状态 verified_public_package_entry · 许可证 BSD-3-Clause for repository code; package dependencies retain their own licenses
README 指向公开 PyPI 包 rsl-rl-lib；安装仍要求兼容的 Python、PyTorch/CUDA 与具体仿真环境，不能视为包含可运行机器人环境或实机部署闭包。
weights · 状态 not_applicable_library_no_official_unified_checkpoint_release · 许可证 not_applicable
RSL-RL 是训练库，不发布覆盖各机器人、任务和环境的统一官方策略权重；下游 checkpoint 必须逐项目核验。
data · 状态 not_applicable_library_no_official_training_dataset_release · 许可证 not_applicable
RSL-RL 不发布统一训练数据集；仿真任务资产、示范、观测定义和真实日志属于各接入环境或下游项目。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-08-26。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。