论文记录 · 证据边界公开

FARM: Frame-Accelerated Augmentation and Residual Mixture-of-Experts for Physics-Based High-Dynamic Humanoid Control

arXiv · 2025-08-27 · 人形全身运动跟踪

论文元数据

作者: Tan Jing、Shiting Chen、Yangfan Li、Weisheng Xu、Renjing Xu
机构: 机构尚未补齐
发布日期精度: 日
研究方向: 人形全身运动跟踪
机器人: 未关联具体机器人
DOI: 10.48550/arXiv.2508.19926
arXiv: 2508.19926
arXiv 当前版本: 1
arXiv 最近修订: 2025-08-27
arXiv 主分类: cs.RO
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已终审官方代码（开放范围与依赖见下）
权重: 已终审官方权重（模型卡与使用边界见下）
数据: 未核验
许可证: 制品许可证已逐项核验（不等于可商用）

当前实践优先级

观察 · 49/100 · 7–12 个月

研发注意力：40/80 · 证据分项观察

工程落地：5/15 · 量化实机证据＋工程实用增量

标准分类标签：技术改进版

路线评审说明：高动态全身控制技术改进版

社区证据类型：尚无独立社区验证

失败帧定向增强和残差专家混合显著缩短单卡微调，代码与 checkpoint 可用；证据仍局限仿真且只限非商业研究。

近期窗口 · 24/35
发布距评分基准日 12 个月，落入 7–12 个月窗口。
社区可复查验证 · 0/25
未发现第三方复现 42.8% 失败率下降或 14.6% global-MPJPE 改善。
跨领域技术创新 · 16/20
动作生成数据、失败检测、frame augmentation、residual mixture-of-experts 与物理控制被组合为高动态长尾修复路线。
量化实机证据 · 0/10
论文明确把真机部署列为未来工作。
开放与可复现 · 4/5
训练代码和 416 MB FARM checkpoint 已核验，但许可证限制非商业研究且 HDHM 打包数据不分发。
工程实用增量 · 5/5
作者报告针对失败片段微调约 6 小时，相对广泛微调 35 小时，直接改善单卡迭代成本。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；量化实机证据不足；无真机；无独立复现；非商业研究许可；HDHM 上游数据需分别授权和重建

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

已终审工程资源

官方代码 · 许可证 NVIDIA noncommercial research and evaluation license; third-party code, assets and datasets retain separate terms · 最近核验 2026-07-20
依赖：Ubuntu 22.04, PyTorch 2.5.1 and NVIDIA Isaac Lab / Isaac Sim、ProtoMotions plus separately sourced HDHM upstream datasets；硬件/传感器：paper configuration: RTX 4090, i9-13900K and 128 GB RAM、simulation only; no physical deployment package；实机证据：No real-robot experiment; physical deployment is future work.；开放范围/限制：Verified at commit f41301adaa3f1af33fa0fc4a510e5f5d020ee257 for noncommercial research/evaluation only. Packaged HDHM data is not distributed.
官方权重 · 许可证 Repository NVIDIA noncommercial research and evaluation terms; no separate commercial grant observed · 最近核验 2026-07-20
依赖：FARM repository environment at the reviewed commit、PyTorch 2.5.1 and compatible Isaac Lab / ProtoMotions stack；硬件/传感器：416,472,236-byte checkpoint; execution hardware not independently benchmarked、paper reports RTX 4090 for training；实机证据：Checkpoint supports simulation evaluation; no physical-robot evidence.；开放范围/限制：Anonymous Git LFS endpoint verified with SHA-256 prefix 17431ad. File was not executed; use is limited to noncommercial research/evaluation under the repository terms.

“官方”表示归属与论文关系已核验；仍应按所列依赖、硬件和许可证复现。

工程资源评审结论与反面证据

official_training_code_and_model_checkpoint_research_only · verified_official_research_only
审核码：verified_official_research_only; 官方关系：verified_official_repository_code_and_weights; 最近核验：2026-07-20
代码：已核验开放用于受限研究。提交 f41301a 包含 183 个 Python 文件与完整 ProtoMotions/Isaac Lab 训练、失败帧增强、专家混合和评测配置。
权重：已匿名核验 FARM score_based.ckpt（416,472,236 字节，SHA-256 17431ad…）以及上游/基础 tracker last.ckpt（279,251,872 字节，SHA-256 f9c4ec…）。本批只为论文方法 checkpoint 创建权重种子。
数据：仓库明确不分发打包训练/评测数据；只提供外部 Drive 线索、处理脚本和忽略清单。HDHM 源自多个上游数据集，必须逐源取得授权。
许可证：NOASSERTION；根 NVIDIA License 只授权非商业研究与评估，不是标准 OSI 开源许可。第三方 ProtoMotions、Isaac Lab、G1/H1 资产、外部 HDHM 源数据和基础 tracker 保留各自条款；模型文件沿用仓库研究限制，商业使用不可推定。
依赖：Ubuntu 22.04, Python and PyTorch 2.5.1、NVIDIA Isaac Lab / Isaac Sim and ProtoMotions、HDHM preprocessing across AIST++, EMDB, Motion-X Kungfu, Text-Convert and Video-Convert sources、CUDA toolchain compatible with the selected Isaac stack
硬件/传感器：paper reports Intel i9-13900K, 128 GB RAM and one NVIDIA RTX 4090、targeted failure-only fine-tuning reported as about 6 hours versus 35 hours for the broader baseline、no physical humanoid deployment is included
实机证据：The paper evaluates physics-based humanoid control in simulation and lists real-robot deployment as future work.；No physical-robot experiment, sim-to-real loss or released hardware controller was found.
独立复现：No issue or external repository reports a fixed-commit reproduction of the 42.8% failure-rate reduction or 14.6% global-MPJPE improvement. Large-file accessibility was verified, but the models were not executed.
限制/反面证据：根许可证限制为非商业研究与评估，不能标为商业友好开源。；HDHM 打包数据不公开；3,593 个片段、平均 9.4 秒、30 Hz 的论文语料需要按上游源分别重建和授权。；没有真机验证或 sim-to-real 量化损失，性能提升仅能作为仿真控制证据。；模型文件可下载不等于本批完成运行复现；依赖 Isaac/ProtoMotions 版本与资产许可仍需逐项固定。
当前建议：高动态全身控制改进版，研究环境可试；失败帧定向增强把算力集中到长尾动作，是兼具性能和训练效率的近期增量；当前适合作为单卡仿真研究基线，不应外推为真机或商用方案。
重点标签：recency:2026-AAAI-oral、关联:主流全身控制技术2.0、关联:近期热门、关联:技术改进版、cross-domain:motion-generation-plus-RL、artifact:code-and-weights-research-only、efficiency:failure-targeted-finetuning、evidence:simulation-only
核验来源：来源 1 · 来源 2 · 来源 3 · 来源 4 · 来源 5

暂缓或驳回结论不会升级代码、权重或数据开放状态；Stars、转发和演示视频不等于独立复现。

原始来源

最近核验：2026-07-20。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。