论文记录 · 证据边界公开

Critic Architecture Matters: Dual vs. Unified Critics for Humanoid Loco-Manipulation

ICRA 2026 Workshop on Reinforcement Learning for Imitation Learning (RL4IL) · 2026-06-10 · Loco-manipulation

论文元数据

作者: Mehmet Turan Yardımcı
机构: 机构尚未补齐
发布日期精度: 日
研究方向: Loco-manipulation
机器人: Unitree G1 23-DoF simulation model
DOI: 10.48550/arxiv.2606.11891
arXiv: 2606.11891
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验可访问（使用限制见许可证）
权重: 已核验未发布
数据: 已核验未发布
许可证: 许可证条款已核验（不等于可商用）

当前实践优先级

观察 · 58/100 · 2–3 个月

研发注意力：49/80 · 近期跨域高潜·社区待验证

工程落地：5/15 · 量化实机证据＋工程实用增量

标准分类标签：技术改进版

路线评审说明：多目标人形强化学习改进版·双critic反共识消融·低成本可复验·动作维度混杂待拆

社区证据类型：尚无独立社区验证

该工作把critic结构从默认实现细节变成可测变量，双critic在同一仿真评测中提高到达率和吞吐；MIT仓库保留论文脚本，但同时改变动作维度、只有单seed且无精确checkpoint或实机，适合做低成本复验而非直接采用结论。

近期窗口 · 32/35
发布距评分基准日 2 个月，落入 2–3 个月窗口。
社区可复查验证 · 3/25
MIT仓库固定commit可检查论文Stage 6/7脚本；没有外部复现实验、日志或同口径checkpoint。
跨领域技术创新 · 14/20
把多目标RL、价值函数结构、课程吞吐、time-to-reach和anti-gaming奖励连成可证伪的系统消融。
量化实机证据 · 0/10
全部结果来自Unitree G1 Isaac Lab仿真，sim-to-real明确为未来工作。
开放与可复现 · 4/5
MIT源代码和论文对应训练/评测入口可取；精确三组checkpoint、容器、seed矩阵和数据日志缺失。
工程实用增量 · 5/5
用到达吞吐和时延替代训练reward自证，最小复验成本低；动作维度12对5的混杂必须先消除。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；量化实机证据不足；统一critic和双critic同时改变手臂动作维度；训练只做单seed且评测为单环境短窗口；精确论文checkpoint未发布，现有权重属于后续29DoF路线；只有单手5DoF仿真，无双手、IL微调或实机；无独立复现

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

每日候选人工终审

该工作把多目标人形强化学习中的critic结构从默认实现细节提升为可测变量：在Unitree G1 23主动自由度、Isaac Lab 4096并行环境、相同确定性评测条件下，双critic相对统一critic把站立伸手验证率从53.8%提高到65.2%，平均到达步数从22.6降到6.5，每千步有效到达从7.0提高到14.3；额外五项anti-gaming奖励没有继续提升。它的实践价值在于提醒研发团队不能只看训练reward和课程等级，而要测time-to-reach、吞吐和超时率。作者仓库在固定commit保留论文对应的23DoF Stage 6统一critic、分支critic和Stage 7 anti-gaming训练/评测脚本，并以MIT开放；但论文三组精确评测checkpoint没有发布，仓库现有三个checkpoint属于后续29DoF路线。更关键的是，统一与双critic同时改变了手臂动作维度12到5，且只做单seed、单手5DoF、纯仿真，因此3.5倍差异不能完全归因critic结构，也不能外推到实机、双手或IL+RL微调。它是值得低成本复验的反共识架构消融，而不是已确认的普适结论。

实机证据：simulation_only_no_physical_robot_evaluation；全部结论来自仿真；论文明确把sim-to-real列为未来工作。标准评测每策略仅在一个环境中各运行站立和行走3000步，训练只做单seed。

硬件/本体：Unitree G1 23 active DoF in NVIDIA Isaac Lab、RTX 5070 Ti 12GB、4096 parallel environments

红旗与边界：统一与双critic同时改变手臂动作维度12到5，归因存在混杂；单seed训练，无法估计训练方差或显著性；纯仿真、单手5DoF、手腕和手固定，没有接触操作或实机证据；精确论文checkpoint和机器可读评测轨迹未发布；IL+RL防遗忘只是机制推断，论文没有做对应实验；训练时长和各策略总迭代量未完整统一披露

查看资源 · code · 状态 official_author_repository_contains_exact_legacy_training_and_evaluation_scripts_at_fixed_commit · 许可证 MIT
作者公开仓库mturan33/isaac-g1-ulc固定commit 169ef888含23DoF的train_ulc_stage_6_unified.py、train_ulc_stage_6_simplified.py、train_ulc_stage_7.py及对应play脚本；还包含后续29DoF双/三分支路线。
weights · 状态 later_29dof_checkpoints_downloadable_but_exact_paper_s6u_s6s_s7_checkpoints_absent · 许可证 MIT repository; no separate model card
仓库提供loco_stage1、arm_stage2和loco_stage2三个后续29DoF checkpoint，但README引用的论文23DoF Stage 6/7日志路径没有对应模型文件，不能用后续权重冒充论文结果复现包。
data · 状态 no_evaluation_rollouts_seed_logs_or_machine_readable_benchmark_release · 许可证 No dataset license
没有三组论文策略的训练日志、随机种子、3000步评测轨迹或逐目标事件表。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-07-22。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。

训练算力(显卡)	RTX 5070 Ti 12GB
训练时长	未披露
部署推理硬件	未披露
显存/内存/CPU 占用	未披露
运行效率(Hz)	未披露

论文元数据

算力与训练档案 置信 low · 模型 glm-5.3 · 更新 2026-09-02T17:44:04Z

算力与训练档案置信 low · 模型 glm-5.3 · 更新 2026-09-02T17:44:04Z