论文记录 · 证据边界公开

HEX: Humanoid-Aligned Experts for Cross-Embodiment Whole-Body Manipulation

arXiv · 2026-04-09 · 通用或轻量 VLA

论文元数据

作者: Shuanghao Bai、Meng Li、Xinyuan Lv、Jiawei Wang、Xinhua Wang、Fei Liao、Chengkai Hou、Langzhe Gu、Wanqi Zhou、Kun Wu、Ziluo Ding、Zhiyuan Xu、Lei Sun、Shanghang Zhang、Zhengping Che、Jian Tang、Badong Chen
机构: Beijing Innovation Center of Humanoid Robotics、Xi'an Jiaotong University、Nankai University、Peking University
发布日期精度: 日
研究方向: 通用或轻量 VLA
机器人: 未关联具体机器人
DOI: 未披露
arXiv: 2604.07993
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已终审官方代码（开放范围与依赖见下）
权重: 已终审官方权重（模型卡与使用边界见下）
数据: 已终审官方数据（下载、格式与上游条款见下）
许可证: 部分制品许可证缺失/冲突；已逐项标注

当前实践优先级

当前可实践 · 65/100 · 4–6 个月

研发注意力：48/80 · 证据分项观察

工程落地：14/15 · 量化实机证据＋工程实用增量

标准分类标签：主流迭代

路线评审说明：跨本体全身VLA主流迭代·12M帧预训练但控制链未开放

社区证据类型：尚无独立社区验证

七种人形本体和12M帧预训练带来79.8%七任务与61.8% OOD表现；2.4B权重公开，但数据只放出约4.31M行，真机控制链因商业限制缺失。

近期窗口 · 28/35
发布距评分基准日 4 个月，落入 4–6 个月窗口。
社区可复查验证 · 0/25
无第三方跨本体预训练、实机部署或成功率复算。
跨领域技术创新 · 20/20
将七本体数据、统一本体投影、稀疏MoE、视觉语言编码与扩散动作头联合。
量化实机证据 · 9/10
七任务各12次、长时任务15次、八种OOD变体，均有对照分母。
开放与可复现 · 3/5
2.4B权重和约4.31M行数据可取；代码无根许可证，完整12M帧与低层控制未放出。
工程实用增量 · 5/5
73.34ms RTX4090推理，平均成功率和OOD均超过π0.5/GR00T等公开基线。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；完整12M帧未开放；低层控制器未开放；采集链未开放；代码无根许可证；无独立复现；跨本体主要是预训练而非同任务实机横评

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

算力与训练档案置信 medium · 模型 glm-5.3 · 更新 2026-09-01T18:50:24Z

技术标签: 通用或轻量 VLA, 人形机器人, 视觉语言动作模型, 全身控制与移动操作, 跨本体学习, Mixture of Experts

训练算力(显卡)	未披露
训练时长	未披露
部署推理硬件	RTX 4090
显存/内存/CPU 占用	未披露
运行效率(Hz)	未披露

证据原文:

RTX 4090 推理 73.34 ms

已终审工程资源

官方代码 · 许可证 not_disclosed; no repository-root license was found at the verified commit · 最近核验 2026-07-21
依赖：Python 3.10、PyTorch、Qwen3-VL、FlashAttention 2.7.3、Accelerate、LeRobot、OpenPI-derived training utilities；硬件/传感器：8 NVIDIA A100 GPUs for the documented distributed recipe、RTX 4090 for the reported 73.34 ms policy latency、Tienkung 2/3 humanoids for matching physical execution；实机证据：The official paper reports eight Tienkung real-world tasks, twelve trials per task, and long-horizon box placement; the review did not execute the physical stack.；开放范围/限制：Verified at commit f1b2d528f65bf85c06ec5357b6a2aea034e9fceb. The repository contains pretraining, fine-tuning, LIBERO evaluation and model-server paths, but training scripts retain author-specific /mnt/dataset paths. The Tienkung low-level controller and data-collection pipeline are withheld for commercial restrictions, and the repository has no license file.
官方数据 · 许可证 Apache-2.0 on the dataset card; upstream Humanoid Everyday and embodiment-specific source terms remain separate · 最近核验 2026-07-21
依赖：LeRobot 2.1 loaders、Parquet and video decoding、HEX training pipeline、large local storage；硬件/传感器：19,496 files totaling 20,797,385,727 bytes、Tienkung 2/3/Tienyi and upstream G1/H1 embodiments represented by the project corpus；实机证据：The public repository includes eight evaluated Tienkung task subsets plus processed Humanoid Everyday material; the complete 12 million-frame pretraining mixture is larger than this public artifact.；开放范围/限制：Verified at revision 37225979b223280a63b176544573d9923154a85d. The public viewer exposes about 4.31 million rows, not the paper's full 12 million-frame mixture. Failure-trajectory prevalence and the withheld collection/control components are not supplied.
官方权重 · 许可证 Apache-2.0 on the model card; Qwen3-VL and other upstream component terms continue to apply · 最近核验 2026-07-21
依赖：HEX repository、Qwen3-VL-2B base、FlashAttention 2.7.3、LeRobot-compatible observations and normalization、GPU model server；硬件/传感器：Nine files totaling 5,534,689,394 bytes、RTX-class GPU for inference、Tienkung-specific controller integration for physical deployment；实机证据：The checkpoint is linked by the current official repository and corresponds to the paper's Tienkung evaluations; no independent physical reproduction was verified.；开放范围/限制：Verified at revision 9ae51baafb252a911c0798a239b9a8b26f0c6038. Open model weights do not supply the withheld low-level controller or data-collection pipeline, and the model-card license does not cover the GitHub source repository.

“官方”表示归属与论文关系已核验；仍应按所列依赖、硬件和许可证复现。

每日候选人工终审

HEX 用人形对齐的身体分区状态、预测式 UPP、形态 MoE、历史缓存和流匹配动作头统一七种人形本体，属于近期“主流全身 VLA 2.0”。同条件实机成功率、长任务和八类 OOD 试验均强，代码、2.4B 权重与约 20.80 GB 数据也真实开放；但代码没有许可证，天工低层控制器和采集链路被商业限制挡住，预训练优势主要是更快收敛而不是最终性能跃迁，因此列为重点关注候选而非确认里程碑。

实机证据：quantified_tienkung_2_and_3_suite；七个已见任务各 12 次，HEX 平均成功率 79.8%；四阶段长时搬箱各 15 次，最终放箱 53.3%，最强基线 π0.5 为 40.0%。八类 OOD 变体平均 61.8%，π0.5 为 44.3%、GR00T N1.5 为 41.0%。所有方法共享同一低层平衡控制器；RTX 4090 推理 73.34 ms。

硬件/本体：Tienkung 2.0、Tienkung 3.0

红旗与边界：代码仓没有许可证，不能把 Hugging Face Apache-2.0 外推到源代码；天工低层 RL 全身控制器和数据采集链路因商业限制未开放，无法端到端复现实机；预训练约 1,000 A100 GPU-hours，门槛高；训练脚本含内部绝对路径，需要人工改造；同一任务预训练主要提升早期收敛，最终 11/12 对 10/12，增量有限；真实跨本体部署只在天工 2.0/3.0 做了任务后训练；七本体更多是预训练数据覆盖

查看资源 · code · 状态 verified_source_available_license_missing · 许可证 not_disclosed
固定提交 f1b2d528f65bf85c06ec5357b6a2aea034e9fceb 含 80 个 Python 文件和训练、微调、LIBERO、模型服务路径；仓库根目录没有 LICENSE。天工低层控制器和采集链路未开放，脚本仍含作者绝对路径。
查看资源 · weights · 状态 verified_open · 许可证 Apache-2.0 on model card
revision 9ae51baafb252a911c0798a239b9a8b26f0c6038，9 个文件、5,534,689,394 bytes，含 2.4B checkpoint、配置与训练日志。
查看资源 · data · 状态 verified_open · 许可证 Apache-2.0 on dataset card
revision 37225979b223280a63b176544573d9923154a85d，19,496 个文件、20,797,385,727 bytes；卡片说明含八个 HEX 实机任务和处理后的 Humanoid Everyday 数据。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-07-23。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。